اولین فیلم با دوبله هوش مصنوعی به‌زودی در آمریکا اکران خواهد شد

فیلم علمی تخیلی سوئدی Watch the Skies از تکنیکی موسوم به Visual Dubbing یا «دوبله بصری» استفاده می‌کند تا حرکت لب بازیگران را با دوبله انگلیسی این فیلم برای مخاطبان جهانی هماهنگ کند. این کار از طریق فناوری هوش مصنوعی انجام می‌شود و اولین فیلمی است که با چنین روشی در آمریکا اکران خواهد شد.

فیلم Watch the Skies با کمک شرکت آمریکایی Flawless و فناوری TrueSync آن این دوبله را انجام می‌دهد. این فناوری اجرای بازیگر را تحلیل می‌کند و بعد با تکنیک یادگیری عمیق نمایی سه‌بعدی از چهره او می‌سازد، سپس حرکات لب او را مطابق با کلمات دوبله تنظیم می‌کند.

فناوری TrueSync از چند سال پیش در دسترس قرار داشته و پیشتر در فیلم ترسناک Fall استفاده شده بود تا بخش‌هایی از فیلم را اصلاح کند. این بخش‌ها شامل تبدیل کلمات توهین‌آمیز به کلماتی ملایم‌تر بود.

اکران اولین فیلم سینمایی با دوبله بصری هوش مصنوعی در آمریکا

اما برای فیلم Watch the Skies از فناوری شرکت Flawless برای دوبله کامل فیلم استفاده می‌شود. بازیگران فیلم دوبله اجرای خود را به زبان انگلیسی در استودیو ضبط کرده‌اند. بنابراین صدای آنها دستکاری نخواهد شد. اما تصویر فیلم باید تغییر کند تا با این صدا هماهنگ شود.

«آلبین پیترسون» از تیم سازنده این فیلم می‌گوید: «اعتقاد داریم مخاطب بدون آنکه متوجه این تغییر فنی شود، نسخه انگلیسی فیلم را تجربه خواهد کرد. نتیجه کار بسیار بهتر از چیزی است که انتظارش را داشتیم.»

این فناوری دارای سیستمی برای مدیریت حقوق معنوی است تا اطمینان یابد که فرایند اصلاح اثر با کمک هوش مصنوعی تنها با رضایت هنرمندان انجام می‌گیرد. همچنین گفته شده TrueSync می‌تواند تا 50 درصد در هزینه‌ها صرفه‌جویی کند و مانع از نیاز به فیلم‌برداری مجدد صحنه‌ها شود.

فیلم Watch the Skies اولین بار در سال 2022 به نمایش درآمد. این اثر قرار است در تاریخ 9 مه (19 اردیبهشت) در ایالات متحده آمریکا اکران شود. داستان فیلم حول محور نوجوانی است که با کمک باشگاه ناظران UFO به‌دنبال پدر گمشده خود می‌گردد که شاید توسط بیگانگان دزدیده شده باشد.