أعلنت شركة Adobe يوم الاثنين أن بإمكان Firefly الآن إنشاء مقاطع فيديو من خلال مطالبات الصور والنصوص، بالإضافة إلى توسيع المقاطع الموجودة. يتم طرح الميزة الجديدة حاليًا لمشتركي Premiere Pro.
تظهر ميزة إنشاء الفيديو لأول مرة في عدد من الأدوات الجديدة لبرنامج Premiere Pro وتطبيق الويب Firefly. على سبيل المثال، يمكن لـ PP's Geneative Extend معالجة ما يصل إلى ثانيتين من لقطات الذكاء الاصطناعي المضافة إما في بداية المقطع أو نهايته، بالإضافة إلى إجراء تعديلات في منتصف اللقطة على موضع الكاميرا، والتتبع، وحتى أهداف اللقطة نفسها.
يتوفر الفيديو الذي تم إنشاؤه بدقة 720 بكسل أو 1080 بكسل بمعدل 24 إطارًا في الثانية (fps). يمكن للأداة أيضًا تمديد المؤثرات الصوتية للمقطع والضوضاء المحيطة بما يصل إلى 10 ثوانٍ، على الرغم من أنها لا تستطيع فعل الشيء نفسه مع الحوار المنطوق أو المقطوعات الموسيقية.
يتلقى تطبيق الويب Firefly أداتين جديدتين خاصتين بالذكاء الاصطناعي: يتم طرح أدوات تحويل النص إلى فيديو وتحويل الصورة إلى فيديو في إصدار تجريبي عام محدود، ويمكنك التقدم بطلب للحصول على قائمة الانتظار هنا. يفعلون ما يبدو أنهم يفعلون. يُنشئ تحويل النص إلى فيديو مقاطع قصيرة بمجموعة متنوعة من الأساليب الفنية ويمكّن المبدعين من ضبط الفيديو الناتج بشكل متكرر باستخدام عناصر التحكم في الكاميرا في تطبيق الويب.
وبالمثل، تستخدم ميزة “صورة إلى فيديو” كلاً من الموجه النصي والصور المرجعية لجعل النموذج أقرب إلى ما يفكر فيه المنشئ، في عدد أقل من التكرارات. تستغرق كلتا ميزتي الويب حوالي دقيقة ونصف لإنشاء مقاطع فيديو تصل مدتها إلى خمس ثوانٍ بدقة 720 بكسل و24 إطارًا في الثانية.
على الرغم من أن أيًا من ميزات إنشاء الفيديو الجديدة هذه ليست رائدة بشكل خاص – تتميز كل من Runway's Gen-3، وMeta's Movie Gen، وSora القادم من OpenAI بميزات ووظائف متطابقة تقريبًا – إلا أن Firefly تقدم لمستخدميها ميزة على النماذج الأخرى حيث أن مخرجاتها “تجارية” آمن.”
قامت Adobe بتدريب نموذج Firefly الخاص بها على صور Adobe Stock والمحتوى المرخص بشكل مفتوح ومحتوى المجال العام، مما يعني أن مخرجاتها التي تم إنشاؤها من غير المرجح أن تؤدي إلى أي مطالبات بانتهاك حقوق الطبع والنشر. لو كان من الممكن قول الشيء نفسه عن المنافسين Runway و Meta و Nvidia.