আংশিক সর্বনিম্ন স্কোয়ার পদ্ধতিতে "আংশিক" কী?


16

আংশিক সর্বনিম্ন স্কোয়ার্স রিগ্রেশন (পিএলএসআর) বা আংশিক সর্বনিম্ন স্কোয়ার্স স্ট্রাকচারাল সমীকরণ মডেলিং (পিএলএস-এসইএম), "আংশিক" শব্দটি কী বোঝায়?


4
নোট করুন যে ওয়াল্ড জুনিয়র মনে করেন "আংশিক সর্বনিম্ন স্কোয়ার" নামটি বিভ্রান্তিমূলক এবং "সুপ্ত স্পেসে প্রজেকশন" বলা উচিত ছিল।
মোমো

@ মোমো: হ্যাঁ, আমি সে সম্পর্কে পড়েছি। তবে, পিএলএস যদি কোনও ডিগ্রীতে বিভ্রান্ত হয় তবে "সুপ্ত স্পেসে প্রজেকশন" আরও কম স্পষ্ট, লিখিত আকারে এই শব্দটি ব্যবহার করার ক্ষেত্রে সুবিধার অভাবের কথা উল্লেখ না করে।
আলেকসান্দ্র ব্লেক

উত্তর:


17

আমি এই প্রশ্নের উত্তর দিতে চাই, মূলত the তিহাসিক দৃষ্টিভঙ্গির উপর ভিত্তি করে , যা বেশ আকর্ষণীয়। হারমান Wold, যিনি উদ্ভাবিত আংশিক লিস্ট স্কোয়ার (পিএলএস) পদ্ধতির শব্দটি ব্যবহার শুরু হয়নি পিএলএস (অথবা এমনকি মেয়াদ উল্লেখ আংশিক ) সরাসরি। সময় প্রাথমিক পর্যায়ে (1966-1969), তিনি এই পদ্ধতির উল্লেখ করা Niles এই বিষয়ে শব্দটি এবং তার প্রাথমিক কাগজ শিরোনাম সমাহার - পুনরুক্তিকারী লিস্ট স্কোয়ার পদ্ধতি দ্বারা অরৈখিক প্রাক্কলন 1966 সালে প্রকাশিত হয়।

আমরা দেখতে পাচ্ছি যে ওজন এবং সুপ্ত ভেরিয়েবল (এলভি) অনুমানের পদ্ধতিটির পুনরাবৃত্ত প্রকৃতির উপর দৃষ্টি নিবদ্ধ করে পরবর্তীকালে আংশিক বলা হবে এমন প্রক্রিয়াগুলিকে পুনরাবৃত্ত হিসাবে চিহ্নিত করা হয় । "ন্যূনতম স্কোয়ারগুলি" শব্দটি কোনও মডেলের অন্যান্য অজানা প্যারামিটারগুলি অনুমান করার জন্য সাধারণ সর্বনিম্ন স্কোয়ারগুলি (ওএলএস) রিগ্রেশন ব্যবহার করে আসে (ওয়াল্ড , 1980)। দেখে মনে হচ্ছে নাইলস পদ্ধতিতে "আংশিক" শব্দের শিকড় রয়েছে, যা "কোনও মডেলের পরামিতিগুলিকে সাবটেটে বিভক্ত করার ধারণাকে বাস্তবায়িত করেছিল যাতে তারা অংশে অনুমান করা যায়" (সানচেজ, 2013, পি। 216; জোর খনি) ।

পিএলএস শব্দটির প্রথম ব্যবহারটি কাগজে ননলাইনার পুনরাবৃত্তীয় আংশিক ন্যূনতম স্কোয়্যারস (এনআইপিএলএস) এর প্রাক্কলন পদ্ধতিতে ঘটেছিল , যা পিএলএস ইতিহাসের পরবর্তী সময়ের প্রকাশনা চিহ্নিত করে - নিপালস মডেলিং পিরিয়ড। ১৯ 1970০ এবং ১৯ the০ এর দশকে নরম মডেলিংয়ের সময় হয়ে ওঠে , যখন কার্ল জোরেস্কোগের এসইএম-এর LISREL পদ্ধতির দ্বারা প্রভাবিত হয়ে ওয়াল্ড নিপলস পদ্ধতির নরম মডেলিংয়ে রূপান্তরিত করে, যা মূলত আধুনিক পিএলএস পদ্ধতির মূল গঠন করে (পিএলএস শব্দটি 1970 এর দশকের শেষের দিকে মূলধারায় পরিণত হয়) )। ১৯৯০-এর দশকে, পিএলএস ইতিহাসের পরবর্তী সময়কাল, যা সানচেজ (2013) "ব্যবধান" সময়কে বলে, এটির ব্যবহার হ্রাস করে মূলত চিহ্নিত করা হয়। ভাগ্যক্রমে, 2000s থেকে শুরু ( একীকরণের সময়কাল)), পিএলএস এসইএম বিশ্লেষণে বিশেষত সামাজিক বিজ্ঞানের ক্ষেত্রে খুব জনপ্রিয় পদ্ধতির হিসাবে তার প্রত্যাবর্তন উপভোগ করেছে।

আপডেট (অ্যামিবার মন্তব্যের জবাবে):

  • সম্ভবত, সানচেজের কথাটি যে উদ্ধৃতি দিয়েছি সেগুলিতে আদর্শ নয় not আমি মনে করি যে "পার্টিতে অনুমান" ভেরিয়েবলের সুপ্ত ব্লকের ক্ষেত্রে প্রযোজ্য । Wold (1980) ধারণাটি বিস্তারিতভাবে বর্ণনা করে।
  • আপনি ঠিক বলেছেন যে নিপালস মূলত পিসিএর জন্য তৈরি হয়েছিল। বিভ্রান্তিটি এই বাস্তব থেকেই উদ্ভূত হয়েছিল যে লিনিয়ার পিএলএস এবং ননলাইনার পিএলএস উভয় পদ্ধতির উপস্থিতি রয়েছে। আমি মনে করি যে রোসিপাল (২০১১) পার্থক্যগুলি খুব ভালভাবে ব্যাখ্যা করেছে (কমপক্ষে, এটি এখন পর্যন্ত সবচেয়ে ভাল ব্যাখ্যা যা আমি দেখেছি)।

আপডেট 2 (আরও স্পষ্টতা):

অমিবার উত্তরে প্রকাশিত উদ্বেগের জবাবে আমি কিছু বিষয় পরিষ্কার করতে চাই cla আমার কাছে মনে হচ্ছে আমাদের নিপালস এবং পিএলএস এর মধ্যে "আংশিক" শব্দের ব্যবহারের পার্থক্য করা দরকার। 1) নিপালসের "আংশিক" এর অর্থ এবং 2) পিএলএসে "আংশিক" এর অর্থ (এটি ফিল2014-র আসল প্রশ্ন) যা দুটি সম্পর্কে পৃথক দুটি প্রশ্ন তৈরি করে। যদিও আমি প্রাক্তন সম্পর্কে নিশ্চিত নই, তবে আমি পরবর্তী সম্পর্কে আরও স্পষ্টতা দিতে পারি।

ওয়াল্ড অনুসারে, জাস্ট্রোস্টম এবং এরিকসন (2001),

পিএলএসে "আংশিক" ইঙ্গিত দেয় যে এটি আংশিক রিগ্রেশন, যেহেতু ...

অন্য কথায়, "আংশিক" পিএলএসের জন্য নিপালস অ্যালগরিদম দ্বারা ডেটা পচন সমস্ত উপাদানকে অন্তর্ভুক্ত না করে , তাই "আংশিক" হতে পারে ste আমি সন্দেহ করি যে একই কারণ সাধারণভাবে নিপলসের ক্ষেত্রে প্রযোজ্য, যদি "আংশিক" ডেটাতে অ্যালগরিদম ব্যবহার করা সম্ভব হয়। এটি নিপালসে "পি" ব্যাখ্যা করবে।

NIPALS সংজ্ঞা শব্দ "অরৈখিক" ব্যবহার নিরিখে (সঙ্গে গুলিয়ে ফেলবেন না অরৈখিক পিএলএস যা পিএলএস পদ্ধতির অরৈখিক বৈকল্পিক প্রতিনিধিত্ব করে,!), আমি মনে করি যে এটা বোঝায় না করতে অ্যালগরিদম নিজেই , কিন্তু অরৈখিক মডেলের হতে পারে যা লিনিয়ার রিগ্রেশন-ভিত্তিক নিপালস ব্যবহার করে বিশ্লেষণ করা হয়েছে।

3 আপডেট (হারমান ওল্ডের ব্যাখ্যা):

যদিও হারমান ওল্ডের ১৯69৯ সালের পেপারটি এনআইপিএলএস-এর প্রথম দিকের কাগজ বলে মনে হচ্ছে, আমি এই বিষয়টির আর একটি প্রথমতম কাগজপত্র সন্ধান করতে পেরেছি। এটি ওল্ডের (১৯ 197৪) একটি কাগজ, যেখানে পিএলএসের "পিতা" নিপালস সংজ্ঞায় "আংশিক" শব্দটি ব্যবহার করার জন্য তার যুক্তি উপস্থাপন করেছেন (পৃষ্ঠা 71):

3.1.4। নিপালস অনুমান: Iterative ওএলএস। যদি মডেলের এক বা একাধিক ভেরিয়েবল সুপ্ত হয়, তবে ভবিষ্যদ্বাণীকারী সম্পর্কগুলি কেবল অজানা প্যারামিটারগুলিতেই জড়িত না, তবে অজানা ভেরিয়েবলগুলিও জড়িত, ফলস্বরূপ অনুমানের সমস্যাটি অনৈখিক হয়ে যায়। ৩.১ (iii)-তে উল্লিখিত হিসাবে, নিপালস একটি পুনরাবৃত্ত পদ্ধতি দ্বারা এই সমস্যাটি সমাধান করে, s = 1, 2, পদক্ষেপের সাহায্যে বলুন ... প্রতিটি পদক্ষেপে সীমাবদ্ধ সংখ্যক ওএলএস রেগ্রেশন জড়িত থাকে, প্রতিটি মডেলের প্রতিটি ভবিষ্যদ্বাণীমূলক সম্পর্কের জন্য একটি করে থাকে। এই জাতীয় প্রত্যেকটি রিগ্রেশন অজানা প্যারামিটার এবং সুপ্ত ভেরিয়েবলগুলির উপ-সেট (তাই নাম আংশিক ন্যূনতম স্কোয়ারস) এর প্রক্সি অনুমান দেয় এবং এই প্রক্সি অনুমানগুলি নতুন প্রক্সি অনুমানগুলি গণনা করার জন্য প্রক্রিয়াটির পরবর্তী ধাপে ব্যবহৃত হয়।

তথ্যসূত্র

রোসিপাল, আর। (২০১১) অরৈখিক আংশিক সর্বনিম্ন স্কোয়ার: একটি ওভারভিউ। লোধি এইচ। এবং ইয়ামানিশি ওয়াই (এডিএস) তে, কেমোইনফরম্যাটিকস এবং অ্যাডভান্সড মেশিন লার্নিং দৃষ্টিভঙ্গি: জটিল কমপিটেশনাল পদ্ধতি এবং সহযোগী কৌশল , পৃষ্ঠা 169-189। দুদকএম, আইজিআই গ্লোবাল। Http://aiolos.um.savba.sk/~roman/Papers/npls_book11.pdf থেকে প্রাপ্ত

সানচেজ, জি। (2013) আর বার্কলে, সিএ: ট্রোচেজ সংস্করণ সহ পিএলএস পাথ মডেলিংHttp://gastonsanchez.com/PLS_Path_Modeling_with_R.pdf থেকে প্রাপ্ত

ভোল্ড, এইচ। (1974)। সুপ্ত পরিবর্তনশীলগুলির সাথে কার্যকারিতা প্রবাহিত হয়: নিপালস মডেলিংয়ের আলোকে উপায়গুলির অংশ ings ইউরোপীয় অর্থনৈতিক পর্যালোচনা, 5 , 67-86। উত্তর হল্যান্ড প্রকাশনা।

ভোল্ড, এইচ। (1980)। তাত্ত্বিক জ্ঞানের ঘাটতি দেখা দিলে মডেল নির্মাণ ও মূল্যায়ন: আংশিক ন্যূনতম স্কোয়ারগুলির তত্ত্ব এবং প্রয়োগ। জে। কমেন্টা এবং জেবি র‌্যামসে (এড।), ইকোনোমেট্রিক মডেলগুলির মূল্যায়ন , পৃষ্ঠা 47-74। নিউ ইয়র্ক: একাডেমিক প্রেস। Http://www.nber.org/chapters/c11693 থেকে প্রাপ্ত

উওল্ড, এস।, জাস্ট্রোম, এম।, এবং এরিকসন, এল। (2001)। পিএলএস-রিগ্রেশন: কেমোমেট্রিক্সের একটি প্রাথমিক সরঞ্জাম। কেমোমেট্রিক্স এবং বুদ্ধিমান পরীক্ষাগার সিস্টেম, 58 , 109-130। doi: 10.1016 / S0169-7439 (01) 00155-1 http://www.libpls.net/publication/PLS_basic_2001.pdf থেকে প্রাপ্ত


@ অ্যামিবা: আমি বিশ্বাস করি যে এই কাগজটি পিএলএসকে আরও প্রযুক্তিগত উপায়ে অন্যান্য পদ্ধতির বিপরীতে ব্যাখ্যা করেছে যা আপনি সম্প্রতি আলোচনা করেছেন discussed তবে নোট করুন যে উপরের ব্যাখ্যাটি পিএলএস রিগ্রেশনকে কেন্দ্র করে, যেখানে পিএলএসে সিস্টেম বিশ্লেষণের একাধিক ক্লাস অন্তর্ভুক্ত রয়েছে (নিম্নলিখিত উপস্থাপনায় স্লাইড 10 দেখুন)। 25-29 স্লাইডগুলির প্রযুক্তিগত নোটগুলি আইএমএইচওও সহায়ক। উপস্থাপনা: plsmodeling.com/pls/pls-intr Productions
আলেকসান্দ্র ব্লেক

@ আলেকসান্দার ব্লেক: এগুলি খুব সুন্দর রেফারেন্স।
আল্প

বাহ, পিএলএস ইতিহাসের সময়কালে লোকেরা নাম দেয়! চিত্তাকর্ষক।
অ্যামিবা বলেছেন মোনিকা

সিরিয়াসলি যদিও, আমি সানচেজেস বইটি দেখেছি, তবে এখনও বুঝতে পারছি না যে "কোনও মডেলের পরামিতিগুলিকে সাবটকে বিভক্ত করার ধারণাটি যাতে অংশে অনুমান করা যায়" এর সাথে নিপলস কী করবে । নিপালসকে মূলত প্রধান উপাদানগুলির গণনা করার পদ্ধতি হিসাবে পরামর্শ দেওয়া হয়েছিল, তাই না? এটা বেশ সহজ। প্যারামিটারগুলির কোনও "বিভাজন" আমি সেখানে "সাবসেটগুলি" তে দেখছি না, সুতরাং সানচেজ এখানে কী বলছেন তা আমার কোনও ধারণা নেই। যাইহোক, আমি নিপালগুলিতে "ননলাইনার" বুঝতে পারি না। অবশ্যই পিসিএ একটি লিনিয়ার কৌশল!
অ্যামিবা বলেছেন মোনিকা

@ অ্যামিবা: আপনার মন্তব্যের জবাবে আমার আপডেট দেখুন। আশা করি এটা সাহায্য করবে.
আলেকসান্দ্র ব্লেক 30'15

7

XY

যাইহোক, icallyতিহাসিকভাবে, @ অ্যালেক্সান্দ্রার সুন্দরভাবে ব্যাখ্যা করে (+1) হিসাবে, পিএলএসটি ওল্ড দ্বারা প্রবর্তিত হয়েছিল যিনি এটি প্রয়োগের জন্য তাঁর নিপালস অ্যালগরিদম ব্যবহার করেছিলেন; নিপালস এর অর্থ "ননলাইনার পুনরাবৃত্ত আংশিক সর্বনিম্ন স্কোয়ারস", সুতরাং স্পষ্টতই পিএলএসে পি কেবল নিপালস থেকে সেখানে এসেছিল।

Xvpvp

  1. v=Xp(pp)1
  2. v1
  3. p=Xv(vv)1

vpX

(কেন তিনি এটিকে "ননলাইনার" বলেছেন তবে আমি এখনও বুঝতে পারি না।)

এই শব্দটি উল্লেখযোগ্যভাবে বিভ্রান্তিমূলক, কারণ যদি এটি "আংশিক" হয় তবে প্রতিটি প্রত্যাশা-সর্বাধিককরণ অ্যালগরিদমটি "আংশিক "ও হয় (বাস্তবে, নিপালস ইএম-এর একটি আদিম রূপ হিসাবে দেখা যায়, দেখুন রোয়েস 1998 )। আমি মনে করি পিএলএস মেশিন লার্নিং প্রতিযোগিতায় সর্বাধিক বিভ্রান্তিকর মেয়াদের জন্য ভাল প্রার্থী। হায় আফসোস, ওয়াল্ড জুনিয়রের প্রচেষ্টা সত্ত্বেও, এটি পরিবর্তনের সম্ভাবনা নেই (উপরে @ মোমোর মন্তব্য দেখুন)।


আপনি আরও উত্তর দিয়ে আমার উত্তর 2 আপডেট করতে আগ্রহী হতে পারে।
আলেকসান্দ্র ব্লেক 30'15

এই আলোচনা অব্যাহত রাখার জন্য ধন্যবাদ (কোনও ভুল বোঝাবুঝি রোধ করতে, আমার বলা উচিত যে আমি কোনওভাবেই আপনার সমালোচনা করার চেষ্টা করি নি!)। এখন, আপনার আপডেট 2 এ আপনি কী ভাবেন যে পিএলএস এবং নিপালগুলিতে আমাদের "আংশিক" অর্থ আলাদা করা উচিত? এটি অদ্ভুত শোনায়; পিএলএস নিপালসের কাজ থেকে বেড়েছে এবং এর থেকে বোঝা যায় যে এর নামটি কেবল একটি ছোট "নীপালস"। এটি Wold এবং অন্যান্য দ্বারা নিশ্চিত করা হয়েছে বলে মনে হয়। 2001 এর কাগজ যা আপনি পেয়েছেন: "এটিতে নিপালস নামে পরিচিত এই মডেলগুলির পরামিতিগুলি অনুমান করার একটি সহজ তবে দক্ষ উপায় অন্তর্ভুক্ত ছিল [...] এটি পরিবর্তিতভাবে, এই মডেলগুলির সংক্ষিপ্ত পিএলএসে নেতৃত্ব দিয়েছিল"
অ্যামিবা

1
vpX

1
গ্রেট! আমি মনে করি শেষ পর্যন্ত সন্তোষজনকভাবে প্রশ্নের উত্তর দেওয়া হয়েছে। এবং অবশেষে আমি আপনার উত্তরটিকে উচ্চতর করেছি, +1 :-) আমি এই উত্তরটি অন্তর্ভুক্ত করার জন্য আমার উত্তরটি সম্পাদনা করেছি। আপনার উত্তর সম্পর্কে: আপনি যখন আপডেট 1 এবং আপডেট 2-তে "আংশিক" শব্দটি ব্যাখ্যা করেছেন, আপনি এখন যে বিষয়ে রাজি হয়েছিলেন তা কি সত্যই বোঝাতে চেয়েছিলেন? আমার কাছে দেখে মনে হচ্ছে আপনার উত্তরটিতে বর্তমানে বিভিন্ন
রকমের

1
আমি জানি না! সম্ভবত এটি সঠিক। কী কী "ননলাইনার মডেলগুলি" নিপালস ব্যবহার করে বিশ্লেষণ করা যেতে পারে এবং কীভাবে তা ব্যাখ্যা করতে পারেন? অন্যদিকে, এটি সম্ভবত একটি সম্পূর্ণ আলাদা বিষয়। আমার বক্তব্যটি হ'ল যে ওল্ড তার নিজের স্বার্থে পিসিএ গণনা করার জন্য নিপালসকে বিকাশ করেছিল, তবে তার কিছু বিশেষ অ্যাপ্লিকেশন মনে ছিল, যেখানে তাকে ননলাইনারি সমস্যাগুলি মোকাবেলা করতে হয়েছিল এবং পিসিএ-তে হ্রাস করে কোনওভাবে লিনিয়ারাইজড করতে হয়েছিল? আজকাল লোকেরা নেতৃস্থানীয় একক ভেক্টর গণনা করার জন্য নিপালসকে একটি সাধারণ অ্যালগরিদম হিসাবে উপস্থাপন করে, তবে সম্ভবত ১৯69৯ সালের উইল্ড এই দৃষ্টিভঙ্গিতে মোটেই রাজি নন!
অ্যামিবা বলেছেন মোনিকা
আমাদের সাইট ব্যবহার করে, আপনি স্বীকার করেছেন যে আপনি আমাদের কুকি নীতি এবং গোপনীয়তা নীতিটি পড়েছেন এবং বুঝতে পেরেছেন ।
Licensed under cc by-sa 3.0 with attribution required.