تجزیه و تحلیل احساسات چند وجهی با استفاده از تکنیک های یادگیری انتقال چندگانه ترکیبی با به کارگیری شبکه های کانولوشنی وزن دار ترکیبی

تحلیل نظرات کاربران شبکه های اجتماعی در رابطه با موضوعات مختلف می تواند منجر به درک صحیح موقعیت، نگرش و نظر آنها نسبت به این موضوعات گردد. تجزیه و تحلیل احساسات یکی از مسائل در حوزه پردازش زبان طبیعی است و در حوزه های مختلفی کاربرد دارد. دسته ای از نظرات کاربران شبکه های اجتماعی به صورت چندوجهی و با استفاده از ترکیبی از چند رسانه مانند متن، تصویر و صورتک به اشتراک گذاشته می شود که ساختار مفیدی برای استخراج و درک بهتر احساسات فراهم می کند. در این مقاله یک روش ترکیبی یادگیری انتقال با استفاده از ۵ مدل از پیش آموزش دیده شده و شبکه های کانولوشنی ترکیبی برای تجزیه و تحلیل احساسات چند وجهی ارائه می شود. در این رویکرد برای استخراج ویژگی های تصاویر از دو مدل از پیش آموزش دیده مبتنی بر شبکه های کانولوشنی، و برای استخراج ویژگی های متون و تعبیه کلمات از سه مدل از پیش آموزش دیده دیگر استفاده می شود. از ویژگی های استخراج شده در شبکه های کانولوشنی ترکیبی استفاده شده و مکانیزم توجه بصری برای تمرکز بر روی مهمترین نواحی احساسی تصاویر و مکانیزم توجه چندراسی برای برجسته سازی کلمات دارای احساس به کار گرفته می شود. نتایج حاصل از طبقه بندی تصاویر و متون با استفاده از تکنیک رای-گیری ترکیب شده و در نهایت برای تعیین قطبیت و برچسب نهایی از همجوشی دیرهنگام استفاده می شود. نتایج حاصل از آزمایشات تجربی مدل پیشنهادی بر روی مجموعه داده استاندارد، دقت مطلوب ۹۶% را نشان می دهد.

کلیدواژه ها:

تجزیه و تحلیل احساسات چند وجهی ، یادگیری عمیق ، یادگیری انتقال ، مکانیزم توجه ، شبکه کانولوشنی وزن دار