انقلاب متا در تولید محتوا: ویژگی جدید هوش مصنوعی برای ترجمه و دوبله صوتی ریلز

تاریخ ارسال : 1404/05/29

ویژگی جدید هوش مصنوعی برای ترجمه و دوبله صوتی ریلز

به گزارش سپیدپندار دات کام متا ویژگی دوبله صوتی خود را به طور جهانی عرضه کرد. ویژگی ریلز از هوش مصنوعی مولد برای ترجمه صدای کاربر استفاده می کند و امکان هماهنگی لب ها (lip-sync) به صورت اختیاری نیز وجود دارد.

به گزارش سپیدپندار دات کام به نقل از انگجت. مارک زاکربرگ اولین بار این توانایی را در رویداد Meta Connect ۲۰۲۴ معرفی نمود. در زمان معرفی قابلیت ترجمه فقط از زبان انگلیسی به اسپانیایی و معکوس مهیا بود. این شرکت حالا زبان های بیشتری را عرضه کرده است. همینطور این خصوصیت در وهله اول فقط برای خالقان محتوا در فیسبوک با بیشتر از هزار فالوئر عرضه شده است. اما هر کاربری که حساب اینستاگرام عمومی داشته باشد، می تواند از آن استفاده نماید.

ابزار مذکور برپایه صدای اصلی فرد آموزش می بیند و کلیپ صوتی ترجمه شده را با تن صدای وی همخوان می کند. قابلیت افزودنی هماهنگی لب ها هم با حرکات دهان فرد به زبان ترجمه شده، همخوان می شود. کاربر جهت استفاده از این خصوصیت باید گزینه «ترجمه صدا با هوش مصنوعی متا» را پیش از انتشار «ریل» انتخاب نماید. همینطور فرد می تواند قابلیت هماهنگی لب ها را هم اضافه کند. در کنار این موارد گزینه ای جهت بررسی نسخه ترجمه شده با هوش مصنوعی پیش از انتشار وجود دارد.

بازدیدکنندگان از ریل هم یک پیام مشاهده می کنند که به آنها اخطار می دهد ترجمه هوش مصنوعی به محتوا افزوده شده است. متا اعلام نموده این خصوصیت در بهترین حالت برای ویدئوهایی که دوربین بسمت صورت است، کار می کند. این شرکت سفارش می کند کاربران هنگام استفاده از قابلیت مذکور از پوشاندن دهان یا گنجاندن موسیقی در پس زمینه خود اجتناب کنند. در کنار این موارد قابلیت مذکور برای دو فرد که صحبت می کنند هم کارآمد است اما بهتر است از تداخل صحبت ها اجتناب شود. این شرکت قابلیت را به عنوان راهی برای افزایش بازدیدکنندگان خالقان محتوا فراتر از زبان مادری شأن عرضه کرده است.

متا (شرکت مادر فیس‌بوک و اینستاگرام) یک قابلیت جدید و کاربردی برای دوبله صوتی ریلز (Reels) را به‌صورت جهانی عرضه کرده است. این ویژگی از هوش مصنوعی مولد استفاده می‌کند تا صدای کاربر را ترجمه کند و امکان هماهنگی لب‌ها (lip-sync) با صدای ترجمه‌شده را نیز فراهم می‌آورد.
 

هوش مصنوعی جدید متا چگونه کار می‌کند؟

این ابزار با تحلیل صدای اصلی کاربر، لحن و تن صدا را حفظ کرده و سپس ویدیو را به زبان انتخابی دوبله می‌کند. همچنین، ویژگی هماهنگی لب‌ها به‌صورت اختیاری به کاربر اجازه می‌دهد که حرکات دهان فرد در ویدیو با کلمات ترجمه‌شده تطبیق پیدا کند.
 
دسترسی و کاربران:
این قابلیت ابتدا برای تولیدکنندگان محتوا در فیس‌بوک با بیش از ۱۰۰۰ دنبال‌کننده و همچنین هر کاربری که حساب عمومی در اینستاگرام داشته باشد، فعال شده است. این گسترش دسترسی نشان می‌دهد که متا قصد دارد این ابزار را در اختیار طیف وسیعی از کاربران قرار دهد تا محتوای خود را به مخاطبان بیشتری در سراسر دنیا برسانند.
 
نحوه استفاده:
کاربران می‌توانند پیش از انتشار ریل، گزینه «ترجمه صدا با هوش مصنوعی متا» را انتخاب کرده و در صورت تمایل، قابلیت هماهنگی لب‌ها را نیز فعال کنند. یک پیش‌نمایش از ویدیوی دوبله‌شده نیز برای بررسی نهایی در دسترس است.
 
نکات مهم برای بهترین عملکرد:
متا توصیه کرده برای بهترین نتیجه، ویدیوها باید به‌گونه‌ای ضبط شوند که صورت به سمت دوربین باشد. همچنین بهتر است از صحبت کردن دو نفر به طور همزمان یا قرار دادن موسیقی پس‌زمینه با صدای بلند خودداری شود تا کیفیت ترجمه و دوبله پایین نیاید.
 
هدف اصلی متا از ارائه این قابلیت، کمک به تولیدکنندگان محتوا است تا با از بین بردن موانع زبانی، مخاطبان خود را به صورت چشمگیری گسترش دهند. با این ابزار، یک ریل که به زبان فارسی ساخته شده، می‌تواند به سرعت به زبان‌های دیگر ترجمه و دوبله شود و در دسترس کاربران غیرفارسی‌زبان نیز قرار گیرد.

 


منبع:

به این مطلب چه امتیازی می دهید؟ 1 2 3 4 5 (1)

نظر شما در مورد انقلاب متا در تولید محتوا: ویژگی جدید هوش مصنوعی برای ترجمه و دوبله صوتی ریلز چیست؟

سوال: