ارزیابی و مقایسه رویکردهای بازیابی اسناد برای پرسش های چندوجهی از بازیابی چگال تا بازخورد ارتباط مبتنی بر مدل های زبانی

پرسش های چندوجهی شامل چندین ترجیح، محدودیت یا نیاز اطلاعاتی هستند که باید به صورت همزمان در فرآیند بازیابی اطلاعات در نظر گرفته شوند. اگرچه مدل های بازیابی متراکم مبتنی بر نمایش برداری توانسته اند عملکرد قابل قبولی در بازیابی معنایی ارائه دهند، میزان اثر بخشی آنها در مواجهه با پرسش های چندوجهی همچنان نیازمند بررسی است. در این پژوهش شش رویکرد مختلف برای پاسخ گویی به پرسش های چندوجهی مورد پیاده سازی و ارزیابی قرار گرفتند. این رویکردها شامل بازیابی متراکم، بازیابی مبتنی بر تجزیه پرسش به وجوه مختلف، تجمیع امتیازهای حاصل از چند زیر پرسش، باز رتبه بندی با استفاده از باز رتبه بندی مبتنی بر انتخاب وجوه مرتبط و همچنین بازخورد ارتباط مبتنی بر مدل های زبانی بزرگ بودند. ارزیابی ها بر روی مجموعه داده Recipe-MPR شامل ۵۰۰ پرسش چندوجهی انجام شد و معیارهای Recall، Precision، Accuracy و F۱ برای مقایسه روش ها مورد استفاده قرار گرفتند. نتایج نشان داد که روش بازیابی پایه عملکرد رقابتی و پایداری ارائه می دهد در حالی که استفاده از تجزیه پرسش و تجمیع ساده امتیازها لزوما منجر به بهبود عملکرد نمی شود. همچنین مشاهده شد که بهره گیری از اطلاعات ارتباطی تولید شده توسط مدل های زبانی بزرگ می تواند دقت به ویژه معیار F۱ را در برخی سناریوها بهبود دهد. یافته های این پژوهش نشان می دهد که هر چند مدل سازی وجوه مختلف پرسش ظرفیت بالقوه ای برای بهبود بازیابی دارد، طراحی سازوکار مناسب برای انتخاب، وزن دهی و ترکیب این وجوه نقش تعیین کننده ای در موفقیت نهایی سیستم ایفا می کند.

کلیدواژه ها:

بازیابی اطلاعات ، بازیابی متراکم ، پرسش های چندوجهی ، باز رتبه بندی ، بازخورد ارتباط ، مدل های زبانی بزرگ