كيف تم إحياء فيلم ذكاء اصطناعي حائز على جوائز من خلال إنشاء تحويل النص إلى فيديو
كيف تم إحياء فيلم ذكاء اصطناعي حائز على جوائز من خلال إنشاء تحويل النص إلى فيديو
إذا كنت منبهرًا بالموجة الأخيرة من مولدات تحويل النص إلى صورة استعد للخطوة التالية في فن الذكاء الاصطناعي: تحويل النص إلى فيديو.
في حين أن تكاليف الحوسبة الضخمة وندرة مجموعات بيانات تحويل النص إلى فيديو أعاقت نمو التقنية ، الأبحاث الحديثة جعل الوعد أقرب إلى الواقع.
أعطى فنان كمبيوتر يدعى جلين مارشال لمحة عن الإمكانات.
فاز الملحن المقيم في بلفاست مؤخرًا بجائزة لجنة التحكيم في مهرجان كان للأفلام القصيرة عن الذكاء الاصطناعي الخاص به الغراب.
بينما كان أسلوبه السابق يحول النص إلى الطفرات البصرية العشوائيةو الغراب يستخدم فيلم تغطية كمرجع للصورة.
قال مارشال لـ TNW: “كنت أتعمق في فكرة نقل نمط الذكاء الاصطناعي باستخدام لقطات الفيديو كمصدر”.
“لذلك سأبحث كل يوم عن شيء ما على YouTube أو مواقع تخزين الفيديو ، وأحاول إنشاء فيديو مثير عن طريق تجريده أو تحويله إلى شيء مختلف باستخدام تقنياتي.
“لقد اكتشفت خلال هذا الوقت رسم على YouTube – فيلم رقص قصير مباشر – والذي سيصبح أساسًا لـ الغراب. “
قام مارشال بتغذية إطارات الفيديو الخاصة بـ رسم إلى CLIPشبكة عصبية أنشأتها شركة OpenAI.
ثم دفع النظام إلى إنشاء مقطع فيديو لـ “لوحة لغراب في منطقة مقفرة”.
فيلمي المدعوم بالذكاء الاصطناعي The Crow يفوز بجائزة لجنة التحكيم في مهرجان كان!https://t.co/WHDsI7UzJM pic.twitter.com/Ww1DGyBbxw
– جلين مارشال (GlennIsZen) 24 أغسطس 2022
يقول مارشال إن المخرجات تتطلب القليل من قطف الكرز. ويعزو ذلك إلى التشابه بين الفيديو الفوري والجزء الأساسي ، والذي يصور راقصة في شال أسود يقلد حركات الغراب.
“هذا هو ما يجعل الفيلم يعمل بشكل جيد ، حيث تحاول منظمة العفو الدولية جعل كل إطار عمل حي يبدو وكأنه لوحة بها غراب ، لذلك أقابلها في منتصف الطريق ، وأصبح الفيلم نوعًا ما معركة بين الإنسان والذكاء الاصطناعي – بكل رمزية موحية “.
في المستقبل ، يريد مارشال إضافة رسوم متحركة ثلاثية الأبعاد إلى إبداعاته في مجال الذكاء الاصطناعي. إنه يستكشف أيضًا إنشاء مقاطع فيديو موجهة بواسطة CLIP ، والتي يمكن أن تضيف توجيهات نصية مفصلة ، مثل حركات الكاميرا المحددة.
يمكن أن يؤدي ذلك إلى أفلام روائية كاملة أنتجتها أنظمة تحويل النص إلى فيديو. ومع ذلك ، يعتقد مارشال أنه حتى تقنياته الحالية يمكن أن تجتذب الاعتراف السائد.
هو يقول الغراب مؤهل الآن للتقديم لجوائز BAFTA المرموقة.
“لم يتم إعداد خطاب لي ، لكني أتخيل أن أحصل على جائزة ، في دور أحد رواد الذكاء الاصطناعي ، وأعلن للجمهور المرصع بالنجوم أن [for] كل واحد منكم ، ممثل ، مخرج ، مصمم مواقع ، مصمم أزياء ، فنان ، ملحن … الذكاء الاصطناعي قادم ، وستجد نفسك في وظيفة مختلفة تمامًا قريبًا – أو ستفقد وظيفتك معًا. “