ارتباط خودکار متن و تصاویر با هوش مصنوعی
محققــان سیســتم هوش مصنوعی ابــداع کردهانــد که بهطور خــودکار متون و تصاویــر مرتبط را بــه یکدیگر مرتبط میکند. این سیســتم در حوزه ترجمه کاربردهای فراوان دارد. بهگزارش مهر، فناوری فعلی شناسایی کالم چندان پیشرفته نیست و نیازمند انبوهی متون و سوابق است تا بتواند منظور کاربر را درک کند. در همین راستا محققان یک سیســتم ماشــین یادگیــری ابــداع کردهاند که میتواند اشــیای موجود در یک صحنه را براساس توصیف ظاهریشان شناسایی کند. بهعنوان مثال کافی است کاربر به بلوز آبی رنگی در تصویر اشاره کند و سیستم میتواند بدون دخالت و نیاز به متنی تکه لباس مذکور را مشخص کند. محققــان بــرای ابداع سیســتم از روشهای کنونی اســتفاده کردند کــه در آن دو شــبکه عصبی طیفــی از تصاویر و اصوات را فــرآوری میکنند و میآموزند چگونه کپشــن صوتی را با تصاویر حاوی شیء مورد نظر ترکیب کنند. آنها در مرحله بعد قابلیت کنترل عکس در شــبکه عصبی را ارتقا دادند تا تصویر را مجزا کنند. از ســوی دیگر شــبکه صوتی طیف را به بخشهای کوچک یک تا دوثانیهای تقسیم میکند. پس از کنار هم قرار دادن تصاویر و کپشن درست در کنار یکدیگر سیستم آموزشی به هوش مصنوعی امتیاز میدهد. چنین سیستمی کاربردهای مختلفی دارد اما به گفته محققان مهمترین کاربرد آن در حوزه ترجمه است.