পিয়ার গ্রেডিং ডিজাইন - সঠিক র‌্যাঙ্কিং / রেটিং পেতে একটি গ্রাফ বেছে নেওয়া


9

পটভূমি। গ্রেডিং প্রক্রিয়ার অংশ হিসাবে পিয়ার গ্রেডিং ব্যবহার করে আমি আধা-স্বয়ংক্রিয় গ্রেডিংয়ের জন্য কিছু কোড লিখছি। শিক্ষার্থীদের একসাথে জোড়া প্রবন্ধ দেওয়া হয় এবং শিক্ষার্থীদের একটি স্লাইডার থাকে তা বেছে নিতে কোনটি আরও ভাল এবং কতটা ভাল better উদাহরণস্বরূপ, স্লাইডারটি এর মতো দেখতে পারে:

A---X-B

পিয়ার গ্রেডিংয়ের ফলাফলের উপর ভিত্তি করে, প্রবন্ধগুলি স্থান পেয়েছে এবং তারপরে শিক্ষক শীর্ষস্থানীয় এক্স% এবং নীচের এক্স% গ্রেড করবে এবং সমস্ত রচনাগুলির জন্য স্কোরগুলি এর ভিত্তিতে স্বয়ংক্রিয়ভাবে গণনা করা হবে। আমি ইতিমধ্যে এই র‌্যাঙ্কিং / স্কোরিং প্রক্রিয়াটি করার পদ্ধতি নিয়ে এসেছি; যে অংশটি ভাল কাজ করে।

আমার প্রশ্ন. শিক্ষার্থীদের জন্য কোন জোড়া রচনা নির্বাচন করব?

সিমুলেশনগুলির পরামর্শ দেয় সঠিক র‌্যাঙ্কিং পেতে কমপক্ষে 3 বার পিয়ার-গ্রেড করার জন্য আমাদের একটি প্রবন্ধ প্রয়োজন। সুতরাং, প্রতিটি রচনাটি পিয়ার গ্রেডিংয়ের জন্য উপস্থাপিত জোড়গুলির মধ্যে কমপক্ষে 3 টিতে উপস্থিত হওয়া উচিত।

আমরা এটিকে গ্রাফ সমস্যা হিসাবে ভাবতে পারি। রচনাগুলি নোড হিসাবে ভাবেন। প্রতিটি প্রান্তটি পিয়ার গ্রেডিং প্রক্রিয়া চলাকালীন উপস্থাপিত একটি প্রবন্ধকে উপস্থাপন করে। উপরের নির্ভুলতার ফলাফলগুলি নির্দেশ করে যে প্রতিটি নোডের (বা বেশিরভাগ নোডের) ডিগ্রি কমপক্ষে be হওয়া উচিত I আমার কোন ধরণের গ্রাফ ব্যবহার করা উচিত? পিয়ার গ্রেডিংয়ের সময় আমি কীভাবে গ্রাফটি তৈরি করতে পারি?

একটি চ্যালেঞ্জ হ'ল যদি আপনার গ্রাফে ক্লাস্টার থাকে তবে এটি পিয়ার-গ্রেডিংসকে স্কিউ করবে। উদাহরণস্বরূপ, আমরা বেশিরভাগ উচ্চ মানের রচনাগুলির বিপরীতে উচ্চ-মানের রচনাগুলি পিয়ার-গ্রেড করতে চাই না, কারণ এটি পিয়ার গ্রেডিংয়ের ফলাফলগুলিকে ঝুঁকবে।

আপনি কি সুপারিশ করতেন?

আমি মনে করি যে এই সমস্যাটি নীচের মতো কিছু ব্যবহার করে একটি পুনর্নির্দেশিত গ্রাফ দিয়ে মডেল করা যেতে পারে:

  • সর্বনিম্ন ডিগ্রি সহ নোড নিয়ে শুরু করুন এবং পরবর্তী নূন্যতমের সাথে এটি লিঙ্ক করুন
  • আপনার গড় ডিগ্রি কমপক্ষে 3 না হওয়া পর্যন্ত চালিয়ে যান
  • নোড সংযোগটি সর্বোচ্চ করুন
  • চক্র সংখ্যা কমানো

এই একটি ভাল পন্থা? যদি না হয় আপনি পরিবর্তে কি সুপারিশ করবেন?


এটি প্রসারকারীদের জন্য একটি আকর্ষণীয় অ্যাপ্লিকেশন হতে পারে । আপনি কি কোনও এক্সপেন্ডারে অ্যাসাইনমেন্টগুলি সাজানোর চেষ্টা করেছেন?
শাল

আপনার ধারগুলির ধারণাটি অর্ধ-সঠিক বলে মনে হচ্ছে। প্রান্তগুলি কেবল একটি তুলনা ঘটেছে তা নির্দেশ করে, তুলনার ফলাফল নয়। সুতরাং কেবল প্রান্তের উপস্থিতি / অনুপস্থিতি অনেক তথ্য এনকোড করে না, কেবল যে তুলনা হয়েছিল তা ঘটে। সমস্যাটি পরিচালনা করার প্রাকৃতিক উপায়ে ওজনযুক্ত / দিকনির্দেশিত প্রান্তগুলি অন্তর্ভুক্ত রয়েছে যেখানে দিকটি যেমন অনুকূল পক্ষে ... এটি একটি প্রবাহ সমস্যার সাথে সমান বলে মনে হচ্ছে ... আপনি "স্লাইডার" বলছেন, এটি কি বহুগুণিত? বা বাইনারি? "স্লাইডার" আমার কাছে রেটিংয়ের মতো মাল্টিভ্যালিউড লাগছিল।
vzn

আপনার প্রশ্নটি কি আপনি পরিষ্কার করতে পারেন? আপনি কীভাবে গ্রাফটি বেছে নেবেন সে সম্পর্কে জিজ্ঞাসা করছেন? অথবা আপনি প্রতিটি প্রান্তের জন্য একটি গ্রাফ এবং রেটিংয়ের সেট দেওয়া সম্পর্কে জিজ্ঞাসা করছেন, সমস্ত রচনা কীভাবে র‌্যাঙ্ক করবেন? প্রাক্তনটি "পরীক্ষামূলক নকশা" এর সাধারণ বিভাগের অধীনে আসে (এবং আমার উত্তর এটি সম্বোধন করে); দ্বিতীয়টি, "ডেটা বিশ্লেষণ" এর সাধারণ বিভাগের অধীনে (এবং আমার উত্তর এবং ভিজএন এর উত্তর উভয়ই এর জন্য কিছু সহায়ক সংস্থান দেয়)।
DW

প্রকৃতপক্ষে আমরা র‌্যাঙ্কিং এবং স্কোরিংয়ের কাজ করেছি, তবে নীচের পদ্ধতির চেষ্টা করব।
ইসমাইল

অনুরূপ সমস্যার কিছু বিশ্লেষণে "র‌্যাঙ্কিং" এবং "স্কোরিং" শব্দগুলি আদানপ্রদানযোগ্য। এটি এখন আরও পর্যালোচনা ও সম্পাদনাগুলি থেকে প্রকাশিত হয়, আপনার সিস্টেমে আপনি তুলনামূলক তথ্যের উপর ভিত্তি করে র‌্যাঙ্কের কম্পিউটার ভিত্তিক অনুমান হিসাবে এবং "রেকর্ডিং "টিকে রচনার মান সম্পর্কিত মানব-ভিত্তিক বিষয়গত সিদ্ধান্ত হিসাবে উল্লেখ করেন (এছাড়াও সাধারণত "গ্রেডিং" বলা হয় যা র‌্যাঙ্কিং প্রক্রিয়া অনুসরণ করে। & আপনি মূলত তুলনা জোড়া বিতরণ করতে আগ্রহী ...
vzn

উত্তর:


7

এর দুটি অংশ রয়েছে: (ক) পিয়ার গ্রেডিং প্রক্রিয়ায় শিক্ষার্থীরা কোন প্রবন্ধের মূল্যায়ন করবে তা নির্ধারণ করার জন্য একটি গ্রাফ ( পরীক্ষামূলক নকশা ) নির্বাচন করা এবং (খ) শিক্ষার্থীর পিয়ার গ্রেডের উপর ভিত্তি করে সমস্ত প্রবন্ধকে র‌্যাঙ্কিং করতে কোন শিক্ষকের র‌্যাঙ্ক করা উচিত তা নির্ধারণ করুন। আমি প্রতিটি জন্য কিছু পদ্ধতি পরামর্শ করব।

একটি গ্রাফ নির্বাচন করা

সমস্যা বিবৃতি. প্রথম পদক্ষেপটি গ্রাফ তৈরি করা। অন্য কথায়, আপনাকে পিয়ার গ্রেডিং অনুশীলনের সময় শিক্ষার্থীদের কাছে কোন জোড়া রচনাগুলি প্রদর্শন করতে হবে তা নির্বাচন করতে হবে।

প্রস্তাবিত সমাধান। এই কাজের জন্য, আমি আপনাকে পরামর্শ দিচ্ছি যে আপনি সমস্ত 3-নিয়মিত (সাধারণ) গ্রাফের সেট থেকে এলোমেলোভাবে নির্বাচিত একটি এলোমেলো গ্রাফ তৈরি করুন ।G

ন্যায়সঙ্গততা এবং বিশদ। এটি জানা যায় যে একটি এলোমেলো নিয়মিত গ্রাফটি একটি ভাল প্রসারক। প্রকৃতপক্ষে, নিয়মিত গ্রাফগুলিতে asympototically অনুকূল প্রসারণ ফ্যাক্টর রয়েছে। এছাড়াও, কারণ গ্রাফটি এলোমেলো, এটি গ্রেডিংয়ের স্কিউিংয়ের ঝুঁকি দূর করতে পারে। এলোমেলোভাবে অভিন্নভাবে একটি গ্রাফ নির্বাচন করে, আপনি নিশ্চিত করছেন যে আপনার পদ্ধতির সমস্ত ছাত্রের জন্য সমানভাবে ন্যায্য। আমি সন্দেহ করি যে অভিন্নভাবে এলোমেলো 3-নিয়মিত গ্রাফ আপনার উদ্দেশ্যে অনুকূল হবে।d

এটি প্রশ্ন উত্থাপন করে: আমরা এলোমেলোভাবে অভিন্নভাবে শীর্ষে 3-নিয়মিত (সাধারণ) গ্রাফটি কীভাবে নির্বাচন করব ?n

ভাগ্যক্রমে, এটি করার জন্য পরিচিত অ্যালগরিদম রয়েছে। মূলত, আপনি নিম্নলিখিত:

  1. পয়েন্ট তৈরি করুন । আপনি এটি প্রতিটি এরেক্টিকের 3 টি অনুলিপি হিসাবে ভাবতে পারেন । এই পয়েন্টের সাথে একটি এলোমেলোভাবে নিখুঁত ম্যাচিং, এলোমেলোভাবে তৈরি করুন । (অন্য কথায়, সমস্ত পয়েন্ট বন্ধ না হওয়া অবধি নীচের পদ্ধতিটি পুনরাবৃত্তি করুন : যেকোন অযৌক্তিক বিন্দুটি নির্বাচন করুন এবং অপ্রাপ্ত পয়েন্টগুলির সেট থেকে এলোমেলোভাবে বেছে নেওয়া অন্য পয়েন্টের সাথে এটি যুক্ত করুন pair3nn3n3n

  2. ম্যাচের সাথে মিলে যাওয়া প্রতিটি দুটি পয়েন্টের জন্য, সংশ্লিষ্ট শীর্ষগুলি (যেগুলি সেগুলির একটি অনুলিপি) এর মধ্যে একটি প্রান্ত আঁকুন। এটি আপনাকে শীর্ষে একটি গ্রাফ দেয় ।n

  3. এরপরে, পরীক্ষিত ফলাফল যদি গ্রাফটি সহজ হয় (যেমন, এটির কোনও স্ব-লুপ নেই এবং পুনরাবৃত্ত প্রান্ত নেই)। এটি যদি সহজ না হয় তবে গ্রাফটি ফেলে দিন এবং 1 ধাপে ফিরে যান it এটি যদি সহজ হয় তবে আপনার কাজ শেষ হয়; এই গ্রাফ আউটপুট।

জানা যায় যে এই পদ্ধতিটি 3-নিয়মিত (সাধারণ) গ্রাফের সেটগুলিতে অভিন্ন বিতরণ তৈরি করে। এছাড়াও, এটি জানা যায় যে তৃতীয় ধাপে আপনার ফলস্বরূপ গ্রাফ গ্রহণ করার ধ্রুব সম্ভাবনা রয়েছে, সুতরাং গড়ে অ্যালগরিদম ট্রায়ালগুলি করবে - সুতরাং এটি বেশ দক্ষ (উদাহরণস্বরূপ, বহুপক্ষীয় চলমান সময়)।O(1)

আমি এই পদ্ধতির বোলোবাস, বেন্ডার এবং ক্যানফিল্ডকে জমা দিয়ে দেখেছি। পদ্ধতির সংক্ষিপ্ত বিবরণ উইকিপিডিয়ায় দেওয়া হয়েছে । আপনি এই ব্লগ পোস্টে একটি আলোচনা খুঁজে পেতে পারেন ।

প্রযুক্তিগতভাবে বলতে গেলে, এটির জন্য সংখ্যাটি হওয়া প্রয়োজন (অন্যথায় শীর্ষে কোনও 3-নিয়মিত গ্রাফ নেই )। তবে এটি মোকাবেলা করা সহজ। উদাহরণস্বরূপ, যদি বিজোড় হয় তবে আপনি এলোমেলোভাবে একটি রচনা বেছে নিতে পারেন, এটিকে আলাদা করে রাখতে পারেন, অবশিষ্ট রচনাগুলিতে একটি এলোমেলো 3-নিয়মিত গ্রাফ তৈরি করতে পারেন, তারপর সেট-সাইড রচনা থেকে 3 এলোমেলোভাবে অন্যান্য প্রবন্ধ যুক্ত করুন। (এর অর্থ এই যে এখানে 3 টি প্রবন্ধ থাকবে যা আসলে 4 বার গ্রেড করা হয়েছে তবে এর কোনও ক্ষতি করা উচিত নয়))nnn

সমস্ত রচনা র‌্যাঙ্কিং

সমস্যা বিবৃতি. ঠিক আছে, সুতরাং এখন আপনার একটি গ্রাফ রয়েছে, এবং আপনি পিয়ার গ্রেডিং অনুশীলনের সময় গ্রেডের জন্য শিক্ষার্থীদের কাছে এই জোড়া প্রবন্ধগুলি (গ্রাফের প্রান্তগুলি দ্বারা নির্দেশিত) উপস্থাপন করেছেন। আপনার কাছে প্রবন্ধগুলির প্রতিটি তুলনার ফলাফল রয়েছে। এখন আপনার কাজটি হ'ল প্রবন্ধগুলির সমস্ত ক্ষেত্রে একটি রৈখিক র‌্যাঙ্কিং নির্ধারণ করা, শিক্ষককে কোনটি মূল্যায়ন করতে হবে তা নির্ধারণে সহায়তা করা।

সমাধান। আমি আপনাকে ব্র্যাডলি-টেরি মডেলটি ব্যবহার করার পরামর্শ দিয়েছি । এটি একটি গাণিতিক পদ্ধতির সাহায্যে এই সমস্যার ঠিক সমাধান করে। এটি খেলোয়াড়দের কয়েকটি জুটির মধ্যে ম্যাচের ফলাফলের ভিত্তিতে কিছু খেলায় খেলোয়াড়দের র‌্যাঙ্কিংয়ের জন্য ডিজাইন করা হয়েছিল। এটি ধরে নেওয়া হয় যে প্রতিটি খেলোয়াড়ের একটি (অজানা) শক্তি থাকে, যা একটি আসল সংখ্যা হিসাবে পরিমাপ করা যেতে পারে এবং অ্যালিস ববকে যেভাবে মারধর করে তার সম্ভাবনার পার্থক্যের কিছু মসৃণ ফাংশন দ্বারা নির্ধারিত হয়। তারপরে, জোড়াযুক্ত জয় / হারের রেকর্ড দেওয়া, এটি প্রতিটি প্লেয়ারের শক্তি অনুমান করে।

এটি আপনার জন্য উপযুক্ত হতে হবে। আপনি প্রতিটি রচনা খেলোয়াড় হিসাবে আচরণ করতে পারেন। দুটি রচনা (পিয়ার গ্রেডিং প্রক্রিয়া চলাকালীন) এর মধ্যে প্রতিটি তুলনা তাদের মধ্যে ম্যাচের ফলাফলের মতো। ব্র্যাডলি-টেরি মডেল আপনাকে সেই সমস্ত ডেটা নেওয়ার এবং প্রতিটি প্রবন্ধের জন্য একটি শক্তি নির্ধারণ করতে অনুমতি দেবে , যেখানে উচ্চতর শক্তিগুলি ভাল রচনার সাথে মিল রাখে। এখন আপনি সমস্ত রচনাগুলি র‌্যাঙ্ক-অর্ডার করতে সেই শক্তিগুলি ব্যবহার করতে পারেন।

বিশদ এবং আলোচনা। আসলে, ব্র্যাডলি-টেরি মডেল আপনি যা চেয়েছিলেন তার চেয়েও ভাল even আপনি একটি লিনিয়ার র‌্যাঙ্কিংয়ের জন্য বলেছেন, তবে ব্র্যাডলি-টেরি মডেলটি প্রতিটি প্রবন্ধকে আসলে একটি (বাস্তব সংখ্যা) রেটিং দেয়। এর অর্থ হল আপনি জানেন না শুধুমাত্র প্রবন্ধ কিনা প্রবন্ধ থেকে অনেক শক্তিশালী কিন্তু একটি মোটামুটি অনুমান কিভাবে অনেক শক্তিশালী এটা। উদাহরণস্বরূপ, কোনটি র‌্যাঙ্ক র‌্যাঙ্ক করে তা আপনার নির্বাচনকে জানানোর জন্য আপনি এটি ব্যবহার করতে পারেন।ij

আপনার কাছে থাকা ডেটা দেওয়া সমস্ত নিবন্ধের জন্য রেটিং বা র‌্যাঙ্কিংয়ের বিকল্প উপায় রয়েছে। উদাহরণস্বরূপ, এলো পদ্ধতিটি অন্য একটি। আমি বিভিন্ন প্রশ্নের উত্তরে তাদের বেশ কয়েকটি সংক্ষিপ্ত করে বলি ; আরও বিস্তারিত জানার জন্য এই উত্তরটি পড়ুন।

অন্য একটি মন্তব্য: ব্র্যাডলি-টেরি মডেল ধরে নিয়েছে যে দুটি খেলোয়াড়ের মধ্যে প্রতিটি তুলনার ফলাফল একটি জয় বা হ্রাস (অর্থাত্ বাইনারি ফলাফল)। যাইহোক, মনে হচ্ছে আপনার কাছে আরও বিশদ ডেটা থাকবে: আপনার স্লাইডারটি একটি প্রবন্ধকে অন্যের তুলনায় পিয়ার গ্রেডারের চেয়ে আরও কত ভাল রেট দেয় তার একটি মোটামুটি অনুমান দেবে। সবচেয়ে সহজ উপায় হ'ল কেবলমাত্র প্রতিটি স্লাইডারকে বাইনারি ফলাফলের জন্য ম্যাপ করা। তবে আপনি যদি সত্যিই চান তবে আরও পরিশীলিত বিশ্লেষণ ব্যবহার করে আপনি সমস্ত ডেটা ব্যবহার করতে পারবেন। ব্র্যাডলি-টেরি মডেলটিতে লজিস্টিক রিগ্রেশন করা জড়িত। আদেশিত লজিট ব্যবহারের জন্য যদি আপনি সাধারণীকরণ করেন তবে আমি বাজি ধরছি যে স্লাইডারগুলির ফলাফল বাইনারি নয় তবে বেশ কয়েকটি সম্ভাবনার মধ্যে একটি হিসাবে আপনি প্রতিটি স্লাইডার থেকে আপনার অতিরিক্ত তথ্য ব্যবহার করতে পারেন।

শিক্ষকের দক্ষ ব্যবহার

আপনি পরামর্শ দিচ্ছেন যে শিক্ষক ম্যানুয়ালি সমস্ত প্রবন্ধের শীর্ষ X% এবং নীচে X% গ্রেড করুন (পিয়ার-গ্রেডিংয়ের ফলাফলগুলি থেকে অনুমান করা র‌্যাঙ্কিং ব্যবহার করে) grade এটি কাজ করতে পারে, তবে আমার সন্দেহ হয় এটি শিক্ষকের সীমিত সময়ের সবচেয়ে কার্যকর ব্যবহার নয়। পরিবর্তে, আমি একটি বিকল্প পদ্ধতির পরামর্শ দিতে চাই।

আমি আপনাকে পরামর্শ দিচ্ছি যে শিক্ষকের দ্বারা গ্রেড করা হয়নি এমন সমস্ত প্রবন্ধের জন্য সর্বোত্তম সম্ভাব্য ক্রমাঙ্কন সরবরাহ করার চেষ্টা করার জন্য সাবসেটটি সাবধানতার সাথে নির্বাচিত হয়ে আপনার নিবন্ধগুলির একটি উপসেট রয়েছে। এর জন্য, আমি মনে করি আপনি যদি নিবন্ধগুলির একটি নমুনা বেছে নিয়েছেন যা সম্ভাব্য উত্তরের পরিসীমাটি অন্তর্ভুক্ত করে (তবে প্রতিটি প্রবন্ধের জন্য কিছু শিক্ষক-শ্রেণিবদ্ধ প্রবন্ধ রয়েছে যা এটি থেকে খুব বেশি দূরে নয়)। এর জন্য, আপনি চেষ্টা করতে পারেন এমন দুটি পদ্ধতির কথা ভাবতে পারি:

  • ক্লাস্টারিং। টেরি-ব্র্যাডলি মডেল দ্বারা উত্পাদিত রেটিংগুলি নিন। এটি রিয়েল সংখ্যার একটি সেট , প্রবন্ধে একটি আসল সংখ্যা। এখন তাদের গুচ্ছ। মনে করুন আপনি শিক্ষক গ্রেড প্রবন্ধগুলি রাখতে চান। একটি পদ্ধতি হ'ল ক্লাসারগুলিতে (এই এক-মাত্রিক ডেটা পয়েন্টগুলিতে) প্রবন্ধগুলি ক্লাস্টারগুলিতে ক্লাস্টার করার জন্য ব্যবহার করা হবে এবং তারপরে এলোমেলোভাবে প্রতিটি ক্লাস্টার থেকে শিক্ষকের গ্রেডে একটি নিবন্ধ নির্বাচন করুন - বা শিক্ষক গ্রেড " প্রতিটি ক্লাস্টারের ক্লাস্টার হেড "।nkkk

  • প্রথমতম পয়েন্ট। একটি বিকল্প হ'ল প্রবন্ধগুলির একটি উপসেট নির্বাচন করার চেষ্টা করা যা একে অপরের থেকে যতটা সম্ভব পৃথক। "দূরেরতম পয়েন্ট প্রথম" (এফপিএফ) অ্যালগরিদম এটির জন্য একটি পরিষ্কার পদ্ধতি। মনে করুন আপনি আছে কিছু দূরত্ব ফাংশন আপনি পরিমাণ নির্ণয় দুই রচনাগুলিকে মধ্যে দূরত্ব করতে দেয় এবং : একটি ছোট দূরত্ব মানে যে প্রবন্ধ, অনুরূপ একটি বৃহত্তর দূরত্ব মানে তারা বিসদৃশ হয়। একটি সেট দেওয়া রচনাগুলিকে যাক থেকে দূরত্ব হতে নিকটতম প্রবন্ধ থেকে । সবচেয়ে দূরের পয়েন্টের প্রথম অ্যালগরিদম একটি তালিকা গণনা করেkd(ei,ej)eiejSd(e,S)=mineSd(e,e)eSkরচনা, , , নিম্নরূপ: the হ'ল প্রবন্ধ যা সর্বাধিক (সমস্ত প্রবন্ধের মধ্যে যেমন )। এই অ্যালগরিদমগুলি প্রবন্ধগুলির একটি সেট জেনারেট করে যা একে অপরের থেকে যতটা সম্ভব পৃথক - যার অর্থ এই যে বাকি রচনাগুলি কমপক্ষে একটির মতোই মিল । সুতরাং, শিক্ষক গ্রেডের এফপিএফ অ্যালগরিদম দ্বারা নির্বাচিত প্রবন্ধগুলি যুক্তিসঙ্গত হবে ।e1,e2,,ekei+1d(e,{e1,e2,,ei})ee{e1,e2,,ei}kkk

আমার সন্দেহ হয় যে এই দুটি পদ্ধতির মধ্যেই শিক্ষকের গ্রেড শীর্ষস্থানীয় এক্স% এবং নীচের এক্স% রচনার চেয়ে আরও সঠিক স্কোর সরবরাহ করতে পারে - যেহেতু খুব ভাল এবং সবচেয়ে খারাপ রচনাগুলি সম্ভবত মাঝখানে রচনার ভরগুলির প্রতিনিধি নয়।

উভয় পদ্ধতির ক্ষেত্রে, আপনি আরও পরিশীলিত দূরত্বের ফাংশন ব্যবহার করতে পারেন যা কেবল পিয়ার গ্রেডিংয়ের উপর ভিত্তি করে শক্তি অনুমানগুলিই নয়, প্রবন্ধগুলি থেকে নেওয়া অন্যান্য কারণগুলিও বিবেচনা করে। সবচেয়ে সহজ সম্ভাব্য দূরত্বের ফাংশনটি কেবল টেরি-ব্র্যাডলি মডেলের ফলাফল হিসাবে যেমন, যেখানে এর শক্তি প্রবন্ধ টেরি-ব্র্যাডলি মডেল পিয়ার শূন্য ফলাফল উপর ভিত্তি করে দ্বারা আনুমানিক হিসাবে। তবে আপনি আরও পরিশীলিত কিছু করতে পারেন। উদাহরণস্বরূপ, আপনি প্রবন্ধ এবং মধ্যে সম্পাদনার দূরত্বটি গণনা করতে পারেনd(e1,e2)=(s(e1)s(e2))2s(e)ee1e2(তাদেরকে পাঠ্যের স্ট্রিং হিসাবে গণ্য করা, সম্পাদনা দূরত্বের গণনা করা এবং দু'টির বৃহত্তর দৈর্ঘ্য দ্বারা ভাগ করা) এবং এটি দূরত্ব ফাংশনের অন্য ফ্যাক্টর হিসাবে ব্যবহার করুন। আপনি প্রবন্ধের শব্দের উপর ব্যাগ-অফ-শব্দের মডেল ব্যবহার করে বৈশিষ্ট্য ভেক্টরগুলিও গণনা করতে পারেন এবং দূরত্ব ফাংশনের অন্য ফ্যাক্টর হিসাবে এই বৈশিষ্ট্য ভেক্টরগুলির (টিএফ-আইডিএফ ব্যবহারের সাথে বৈশিষ্ট্যযুক্ত বৈশিষ্ট্যগুলি) মধ্যে L2 দূরত্ব ব্যবহার করতে পারেন। আপনি একটি দূরত্ব ফাংশনটি ব্যবহার করতে পারেন যা শক্তির পার্থক্যের একটি ভারী গড় (টেরি-ব্র্যাডলি অনুমানের উপর ভিত্তি করে), স্বাভাবিকিকৃত সম্পাদনার দূরত্ব এবং যে কোনও কিছু সহায়ক বলে মনে হয়। ক্লাস্টারিং অ্যালগরিদম নির্বাচন করতে শিক্ষকের গ্রেড প্রাপ্ত সেরা রচনাগুলি নির্বাচন করতে সহায়তা করার জন্য আরও বেশি পরিশীলিত দূরত্বের কাজটি আরও ভাল কাজ করতে পারে।k


মূল সমস্যা বিবৃতি সম্পর্কিত আপত্তিজনক। আপনি কি সমানভাবে তুলনা বিতরণের সমস্যা সমাধান করছেন?
vzn

2
@ ভিজেএন, আমি আমার উত্তরটি স্পষ্ট করে সম্পাদনা করেছি। প্রশ্নটি মনে হয় গ্রাফটি কীভাবে নির্বাচন করতে হবে, অর্থাত্ কোন যুগের প্রবন্ধকে পিয়ার-গ্রেডিংয়ের সময় শিক্ষার্থীদের তুলনা করতে বলুন। আমার উত্তরের প্রথমার্ধটি সেই প্রশ্নের সমাধান দেয়। আমার উত্তরের দ্বিতীয় অংশটি বর্ণনা করে যে কীভাবে পিয়ার-গ্রেডিংয়ের ফলাফলগুলি সমস্ত রচনাকে র‌্যাঙ্ক-অর্ডার করতে, শিক্ষককে কোন প্রবন্ধটি গ্রেডে নির্বাচন করতে সহায়তা করতে সহায়তা করে।
ডিডাব্লু

0

ইনপুট এবং আউটপুটগুলির সঠিক-নির্ভুল বর্ণনা এবং কী গণনা করতে হবে তার উপর ভিত্তি করে কয়েকটি ধারণা (সম্ভবত আপনি আপনার প্রশ্নটিকে মনে রেখে সংশোধন করতে পারেন)।

স্পষ্টতই এটি মূলত "হট অর নন" "ফেসম্যাশ" সমস্যা যা ফেসবুক প্রতিষ্ঠার মধ্য দিয়ে উদ্ভূত হয়েছিল (যেমন "সামাজিক নেটওয়ার্ক" সিনেমায় চিত্রিত হয়েছে)। মূল "গেম" এ, ব্যবহারকারীদের দুটি ছবি ছিল এবং আরও আকর্ষণীয় মহিলা এর মধ্যে বেছে নিয়েছিল। আপনার সিস্টেমে পছন্দ দুটি প্রবন্ধের মধ্যে রয়েছে যার মধ্যে একটি ভাল।

কাছাকাছি-সাইবার-লোককাহিনী থেকে দাবা ম্যাচ স্কোরিং সিস্টেমে দৃশ্যত এলো র‌্যাঙ্কিং অ্যালগরিদমগুলি রূপান্তরিত সমাধান গণনা করতে ব্যবহার করা যেতে পারে (এক্ষেত্রে মূলত নির্দেশিত অগ্রাধিকারের গ্রাফের সাথে সামঞ্জস্য রেখে প্রবন্ধের স্কোরটি অনুমান করতে পারেন), তবে এখনও সতর্কতার সাথে দেখা হয়নি এর বিবরণ / লেখার ব্যবস্থা।

অন্য বিকল্পটি পেজর্যাঙ্ক ব্যবহার করা। যা নির্দেশিত লিঙ্ক গ্রাফের ভিত্তিতে একটি পৃষ্ঠার অনুমান প্রভাবের গণনা করে। প্রবন্ধগুলিতে পছন্দগুলি কোনও ওয়েব পৃষ্ঠার লিঙ্কের সাথে সাদৃশ্যপূর্ণ।

সমস্যাটি উদ্ধৃতি বিশ্লেষণের মতো বলে মনে হয় যেখানে বৈজ্ঞানিক কাগজপত্রগুলি অন্যান্য কাগজপত্রকে উদ্ধৃত করে এবং কাগজপত্রের প্রভাব অনুমান করা হয়। [তবে দ্রষ্টব্য পেজর্যাঙ্কও এই অঞ্চলে একটি শীর্ষস্থানীয় অ্যালগরিদম]

[1] ফেসম্যাশ অ্যালগরিদমের জন্য এলো র‌্যাঙ্কিং কেন ব্যবহার করবেন? Stackoverflow

[২] ইলো র‌্যাঙ্কিং সিস্টেম , উইকিপিডিয়া

[3] পেজরঙ্ক , উইকিপিডিয়া

[৪] উদ্ধৃতি বিশ্লেষণ , উইকিপিডিয়া


এলো কীভাবে প্রয়োগ করবেন তার স্কেচ: গেমের ম্যাচগুলি প্রবন্ধের তুলনার মতো। প্রবন্ধগুলির স্কোর রয়েছে এবং উচ্চতর স্কোরিং রচনাগুলি আরও ম্যাচ জিততে হবে। অ্যালগরিদম স্কোরগুলি গণনা করে যা সমস্ত ম্যাচের সাথে সর্বাধিক সামঞ্জস্যপূর্ণ।
vzn

উল্লেখ করুন যে উদ্ধৃতি ধারণাগুলি ধরে নিচ্ছে যে সমস্ত তুলনা কিছু প্রবন্ধে সমানভাবে সমানভাবে বিতরণ করা হয়েছে অন্যথায় যদি একটি রচনা আরও তুলনা করা হয় তবে এটি তার তুলনামূলক অনুকূলতা বাড়িয়ে তুলতে পারে। সুতরাং এই পদ্ধতির অংশটি তুলনাগুলিকেও সামঞ্জস্য করছে যা আপনি উল্লেখ করছেন বলে মনে করছেন, এবং সমস্ত খেলোয়াড়ের উপর ম্যাচ বিতরণ করার চেষ্টা করার সমস্যার সাথে মিল রয়েছে ...
vzn
আমাদের সাইট ব্যবহার করে, আপনি স্বীকার করেছেন যে আপনি আমাদের কুকি নীতি এবং গোপনীয়তা নীতিটি পড়েছেন এবং বুঝতে পেরেছেন ।
Licensed under cc by-sa 3.0 with attribution required.