এই কাগজটি CC 4.0 লাইসেন্সের অধীনে arxiv-এ উপলব্ধ।
লেখক:
(1) ঝিহাং রেন, ক্যালিফোর্নিয়া বিশ্ববিদ্যালয়, বার্কলে এবং এই লেখকরা এই কাজে সমানভাবে অবদান রেখেছেন (ইমেল: [email protected]);
(2) জেফারসন ওর্তেগা, ক্যালিফোর্নিয়া বিশ্ববিদ্যালয়, বার্কলে এবং এই লেখকরা এই কাজে সমানভাবে অবদান রেখেছেন (ইমেল: [email protected]);
(3) ইফান ওয়াং, ক্যালিফোর্নিয়া বিশ্ববিদ্যালয়, বার্কলে এবং এই লেখকরা এই কাজে সমানভাবে অবদান রেখেছেন (ইমেল: [email protected]);
(4) ঝিমিন চেন, ক্যালিফোর্নিয়া বিশ্ববিদ্যালয়, বার্কলে (ইমেল: [email protected]);
(5) Yunhui Guo, ডালাসে টেক্সাস বিশ্ববিদ্যালয় (ইমেল: [email protected]);
(6) স্টেলা এক্স ইউ, ইউনিভার্সিটি অফ ক্যালিফোর্নিয়া, বার্কলে এবং ইউনিভার্সিটি অফ মিশিগান, অ্যান আর্বার (ইমেল: [email protected]);
(7) ডেভিড হুইটনি, ক্যালিফোর্নিয়া বিশ্ববিদ্যালয়, বার্কলে (ইমেল: [email protected])।
আমরা সম্মতির সাথে প্রতিটি পৃথক টীকাকারের চুক্তি গণনা করে আমাদের ডেটাসেটে কোন গোলমাল টীকাকার ছিল কিনা তা মূল্যায়ন করেছি। প্রতিটি ভিডিওর জন্য প্রতিটি টীকাকার এবং লিভন-আউট সম্মতির (বর্তমান টীকা ব্যতীত প্রতিক্রিয়াগুলির সমষ্টি) মধ্যে পিয়ারসন পারস্পরিক সম্পর্ক গণনা করে এটি করা হয়েছিল। আমাদের ডেটাসেটে শুধুমাত্র একজন পর্যবেক্ষকের .2-এর থেকে ছোট একটি পারস্পরিক সম্পর্ক ছিল ভিডিও জুড়ে একমত রেটিং-এর সাথে। আমরা .2 কে থ্রেশহোল্ড হিসাবে বেছে নিয়েছি কারণ এটি প্রায়শই মনস্তাত্ত্বিক গবেষণায় দুর্বল পারস্পরিক সম্পর্কের সূচক হিসাবে ব্যবহৃত হয়। গুরুত্বপূর্ণভাবে, যদি আমরা প্রতিটি ভিডিওর ঐকমত্য এবং ঐকমত্যের মধ্যে পারস্পরিক সম্পর্ক তুলনা করি যা দুর্বল চুক্তি দেখায় এমন একজন টীকাকারকে সরিয়ে দেয়, আমরা একটি খুব উচ্চ সম্পর্ক (r = 0.999) পাই যা ইঙ্গিত করে যে সেই বিষয়টি ত্যাগ করা ঐকমত্য প্রতিক্রিয়াকে উল্লেখযোগ্যভাবে প্রভাবিত করে না আমাদের ডেটাসেটে। এইভাবে, আমরা ভিডিওতে কোনো গুরুত্বপূর্ণ বিকল্প টীকা অপসারণ এড়াতে ডেটাসেটে দুর্বল চুক্তির সাথে টীকাকে রাখার সিদ্ধান্ত নিয়েছি।
এই কাগজটি CC 4.0 লাইসেন্সের অধীনে arxiv-এ উপলব্ধ ।