ابزارهای هوش مصنوعی صوتی جدید ادوبی؛ افزودن موسیقی و دوبله به ویدیوها با یک کلیک!

ساخت خودکار موسیقی با هوش مصنوعی Generate Soundtrack

ابزار هوش مصنوعی Generate Soundtrack در نسخه بتای عمومی ادوبی فایرفلای قابل استفاده است و با تحلیل ویدیوی آپلودشده، مجموعه‌ای از قطعات موسیقی بی‌کلام را به‌طور خودکار با ویدیو هماهنگ می‌کند.

کاربران می‌توانند سبک موسیقی را از میان پیش‌تنظیم‌هایی مانند lofi، هیپ‌هاپ، کلاسیک، EDM و … انتخاب کنند یا با وارد کردن توضیحاتی در رابط متنی، حال و هوای موردنظرشان (احساسی، پرانرژی، آرام و غیره) را تعیین کنند. ابزار حتی بر اساس ویدیوی آپلودشده، پیشنهاد متنی اولیه‌ای برای شروع ارائه می‌دهد.

به گفته Alexandru Costin، مدیر بخش هوش مصنوعی ادوبی:

«ما می‌خواهیم به کاربران کمک کنیم تا برای موسیقی به درستی دستور بدهند. با ارسال کلیپ خود، ما پیش‌بینی می‌کنیم چه نوع موسیقی با آن مطابقت دارد. همچنین می‌توانید با رویکردی شبیه Mad Libs، سبک، حالت و هدف کلیپ خود را انتخاب کنید.»

هر دستور تولید موسیقی چهار گزینه متفاوت ارائه می‌دهد و طول هر قطعه حداکثر پنج دقیقه است. مدل هوش مصنوعی Firefly که Generate Soundtrack بر پایه آن ساخته شده، از محتوای دارای مجوز استفاده کرده و بنابراین ویدیوهای تولیدشده از نظر حق نشر ایمن هستند.

دوبله خودکار با هوش مصنوعی Generate Speech

ابزار Generate Speech نیز در نسخه بتای عمومی ارائه شده و می‌تواند از متن دوبله صوتی تولید کند. این ابزار بیش از ۵۰ صدا از مدل Firefly Speech یا ElevenLabs ارائه می‌دهد و از ۲۰ زبان پشتیبانی می‌کند.

بنابر اعلام ادوبی، کاربران می‌توانند سرعت، زیر و بمی و لحن صدا را تنظیم کنند و تلفظ کلمات یا اسامی منطقه‌ای را به‌صورت دستی اصلاح نمایند.

ویرایشگر ویدیوی فایرفلای

ادوبی همچنین در حال توسعه ویرایشگر ویدیوی Firefly است که به گفته این شرکت «ویرایشگر تایم‌لاین چندترکیبی برای تولید، سازمان‌دهی، برش و چینش کلیپ‌ها» محسوب می‌شود.

این ابزار صوتی مجموعه‌ای از قابلیت‌های تولید دوبله، موسیقی و عنوان‌ها را در یک اپلیکیشن وب ارائه می‌دهد و امکانات ویرایش فریم‌به‌فریم و پیش‌تنظیم‌های سبک را نیز شامل می‌شود.

ویرایشگر ویدیوی Firefly از ماه آینده در بتای خصوصی عرضه خواهد شد و کاربران علاقه‌مند باید برای دسترسی زودهنگام در فهرست انتظار ثبت‌نام کنند.

گفتنی است شرکت ادوبی به طور همزمان، ابزارهای هوش مصنوعی جدید فتوشاپ و پریمیر پرو را نیز معرفی کرده است که ویرایش خودکار عکس و ویدیو با چند دستور ساده را امکانپذیر می‌کند.