تفسیر احساسات شخصیت‌های سینمایی توسط هوش مصنوعی

به گزارش خبرنگار فرهنگ و جامعه خبرگزاری علم و فناوری آنا، محققان مرکز بین المللی فناوری اطلاعات در حیدرآباد هند (IIIT-H) به ماشین‌ها یاد می‌دهند تا احساسات انسانی و حالت‌های ذهنی را شناسایی و تفسیر کنند. این بخشی از رشته در حال تکامل و رشد رایانش احساسی (affective computing) است.

با یک مدل یادگیری ماشینی جدید (ML) که احساسات را از روی صحنه‌های پیچیده فیلم‌ها آنالیز و تحلیل می‌کند، محققان مرکز IIIT-H هوش مصنوعی را به این هدف نزدیک‌تر کرده‌اند.

در یک تحقیق به نام «چه حسی داری؟ یادگیری احساسات و حالت‌های ذهنی در صحنه‌های فیلم»، محققی به نام دروف اسریواستاوا به همراه همکارانش یک مدل یادگیری ماشینی را ارائه کرد که از یک ساختار مبتنی بر ترانسفورمر برای درک احساسات استفاده می‌کند و احساسات شناسایی شده را نه تنها برای هر شخصیت سینمایی که برای کل خود فیلم شناسایی می‌کند.

با توجه به این که سینما دارای حجم عظمی از داده‌های احساسی است که پیچیدگی‌های موجود در زندگی روزمره انسان‌ها را نشان می‌دهند، این گروه از فیلم‌ها به عنوان نقطه شروع کارشان استفاده کردند. برخلاف تصاویر ایستا و ثابت، تفسیر فیلم‌ها و تصویر متحرک برای ماشین‌ها بی‌نهایت پیچیده است.

برای آموزش به این مدل، این تیم محققان از دیتاست موجود متشکل از کلیپ‌های جمع‌آوری شده توسط پروفسور تاپاسوی در تحقیق قبلی‌اش به نام «مووی گراف‌ها» استفاده کردند که اطلاعات گرافیکی دقیقی درباره شرایط اجتماعی ترسیم شده توسط صحنه‌های فیلم‌های مختلف ارائه می‌داد.

این مدل جدید که EmoTx نام دارد در واقع با آنالیز یک ویدئوی کامل و اکشن‌های مختلفش را تفسیر می‌کند. این تحقیق در حال حاضر توسط مجامع علمی مختلف در سراسر دنیا به عنوان یک تحقیق استاندارد پذیرفته شده است و محققان در حال توسعه آن هستند.