يُطلق Synthesis AI لأول مرة تقنية تحويل النص إلى ثلاثي الأبعاد لتوليف بشري رقمي بجودة سينمائية

أعلنت شركة Synthesis AI ، وهي شركة ناشئة مقرها سان فرانسيسكو متخصصة في تقنيات البيانات التركيبية ، اليوم أنها طورت طريقة جديدة لإنشاء إنسان رقمي ثلاثي الأبعاد واقعي من رسائل نصية.

قالت الشركة إن تقنيتها الجديدة لتحويل النص إلى ثلاثي الأبعاد ، والتي يتم عرضها في نظامها الأساسي على الإنترنت Synthesis Labs ، تستخدم الذكاء الاصطناعي التوليدي وخطوط أنابيب المؤثرات المرئية لإنتاج إنسان رقمي عالي الدقة وجودة سينمائية يمكن استخدامه في تطبيقات مختلفة ، مثل مثل الألعاب والواقع الافتراضي والأفلام والمحاكاة.

تدعي شركة Synthesis AI أنها أول شركة تعرض تخليقًا بشريًا رقميًا من نص إلى ثلاثي الأبعاد بمستوى عالٍ من الجودة والتفاصيل. تتيح التقنية للمستخدمين إدخال أوصاف نصية للإنسان الرقمي المطلوب ، مثل العمر والجنس والعرق وتصفيفة الشعر والملابس ، ثم إنشاء نموذج ثلاثي الأبعاد يطابق المواصفات. يمكن للمستخدمين أيضًا تحرير النموذج ثلاثي الأبعاد عن طريق تغيير المطالبات النصية أو استخدام أشرطة التمرير لضبط ميزات مثل تعابير الوجه والإضاءة.

قالت الشركة إن تقنية تحويل النص إلى 3D كانت جزءًا من مهمتها الأوسع نطاقًا لدعم تطبيقات الذكاء الاصطناعي المتقدمة من خلال توفير بيانات تركيبية مصنفة تمامًا لتدريب نماذج التعلم الآلي. البيانات التركيبية هي بيانات تم إنشاؤها بشكل مصطنع تحاكي البيانات الحقيقية ، ولكنها لا تحتوي على أي معلومات شخصية أو حساسة.

“إن إمكانية تحويل النص إلى ثلاثي الأبعاد التي نعرضها في Synthesis Labs تتخذ منهجًا برمجيًا يعتمد على واجهة برمجة التطبيقات كنقطة انطلاق ، ويضيف واجهة مستخدم قائمة على موجه بسيطة ميتة ، ويخرج نموذجًا ثلاثي الأبعاد عالي الدقة يمكن أن يكون تستخدم كبيانات تركيبية عبر مجموعة واسعة من حالات الاستخدام التي تتطلب بشرًا رقميًا ، “صرح بذلك ياشار بهزادي ، الرئيس التنفيذي ومؤسس Synthesis AI لـ VentureBeat. “تقوم Synthesis Labs بإخراج بعض أعمال البحث والتطوير الخاصة بنا مع العملاء الفعليين.”

يأتي هذا الإعلان بعد إطلاق سيناريوهات Synthesis Humans و Synthesis ، والتي تمثل عروض متعمقة للبيانات التركيبية المرتكزة على الإنسان والمتاحة حاليًا في السوق.

الاستفادة من تحويل النص إلى ثلاثي الأبعاد باستخدام الذكاء الاصطناعي التوليدي

جمعت Synthesis AI بين الذكاء الاصطناعي وخطوط أنابيب VFX السينمائية لإنتاج بيانات تركيبية مميزة تمامًا لتدريب نماذج التعلم الآلي. يمثل هذا التطور المرة الأولى التي يتم فيها عرض التوليف البشري الرقمي من نص إلى ثلاثي الأبعاد بجودة سينمائية عالية الدقة ، ومن المتوقع أن يؤدي إلى تسريع تطوير التطبيقات ثلاثية الأبعاد وتقليل تكاليفها في مجموعة متنوعة من الصناعات ، بما في ذلك AR / VR ، الألعاب ، المؤثرات البصرية ، المدن الذكية ، التجربة الافتراضية (VTON) ، السيارات ، والمحاكاة الصناعية والتصنيعية.

يعد إنشاء النماذج ثلاثية الأبعاد عملية معقدة ومتعددة الأوجه تتطلب التفاعل بين العديد من العناصر ، بما في ذلك الهندسة والشبكات وطبقات النسيج. بالنسبة لفناني الألعاب والمؤثرات الصوتية المتمرسين ، كان البدء بنموذج بشري للشخصيات والمشاهد التي تتمحور حول الإنسان هو الخيار المفضل تاريخيًا. غالبًا ما يكون هذا النهج أسرع وأكثر وضوحًا من بناء إنسان تم إنشاؤه بواسطة الكمبيوتر من نقطة الصفر.

ومع ذلك ، فإن صياغة نماذج بشرية عالية الجودة يعد إنجازًا صعبًا يتطلب إعدادات قياس تصويرية متخصصة. تم تصميم هذه الإعدادات لالتقاط زوايا متعددة لأشخاص فعليين في ظل إعدادات مضبوطة لإنشاء صور أولية ثنائية الأبعاد. يتم بعد ذلك دمج الصور بدقة باستخدام مجموعة متنوعة من الأدوات المصنوعة يدويًا والمحسنة لضمان الجودة المثلى.

من خلال التوليف البشري الرقمي من نص إلى ثلاثي الأبعاد ، ابتكرت الشركة نهجًا مبتكرًا ، حيث طورت نماذج داخلية تستفيد من بنيات الذكاء الاصطناعي التوليدية القائمة على الانتشار لإنشاء مجموعة متنوعة من الشبكات التي تحكمها معايير مهمة مثل الجنس والعمر والعرق ، و اكثر. يتم إنشاء طبقات النسيج باستخدام نموذج توليدي منفصل يوفر تحكمًا مستقلًا دقيق الحبيبات.

يتم إنتاج نموذج ثلاثي الأبعاد شامل وعالي الدقة من خلال دمج هذين المكونين الأساسيين.

“إن إنشاء مجموعة متنوعة من البشر أمر معقد أكثر بسبب الخدمات اللوجستية لتجنيد أفراد معينين والحصول على إعفاءات. قال بهزادي من Synthesis AI لـ VentureBeat: “البدء بإنسان رقمي مركب غير مكلف هو أمر من حيث الحجم أسرع وأرخص من أي من هذين الخيارين”. تتيح إمكانية تحويل النص إلى ثلاثي الأبعاد إنشاء أصول عالية الجودة عند الطلب ، مما يوفر أسابيع من الوقت وآلاف الدولارات لكل نموذج “.

تقدم عروض تحويل النص إلى ثلاثي الأبعاد الجديدة ، التي تظهر في Synthesis Labs ، الإدخال والتحرير الفوريين ، مما يجعل إمكانات الذكاء الاصطناعي ثلاثية الأبعاد الخالية من التعليمات البرمجية أكثر سهولة في الوصول إلى جميع مستويات الخبرة.

“بالنسبة للمبتدئين ، يجلب التوليد والتكرار السريعان القوة الإبداعية لأي شخص قادر على استخدام محرك بحث. ومع ذلك ، نعتقد أن المستخدمين الأوائل والمستخدمين المتميزين سيكونون فنانين تقنيين في جميع أشكال الترفيه والوسائط ، بالإضافة إلى مديري المنتجات في البرامج الصناعية والتصنيعية الذين يتطلعون إلى نشر محاكاة ثلاثية الأبعاد مع أشخاص رقميين تمثيليين “. “كلاهما جمهور تقني ، ولكن من المحتمل ألا يمتلك مهارات متقدمة في التعلم الآلي.”

تعد مكتبة Synthesis AI الخاصة بأكثر من 100 ألف شخص رقمي (أو معرفات) هي البيانات الأساسية المستخدمة لتدريب النماذج. تستفيد منتجات الشركة الأخرى ، Synthesis Humans and Synthesis Scenarios ، بالفعل من هذه المكتبة لدعم فرق الرؤية الحاسوبية الرائدة ببيانات التدريب المصنفة لدعم تطوير قدرات معرف الوجه ، ومراقبة السائق ، والصور الرمزية والمزيد.

ماذا بعد توليف الذكاء الاصطناعي؟

يمثل إطلاق Synthesis Labs علامة بارزة في رحلة Synthesis AI لتمكين عملاء المؤسسات والقطاع الصناعي والقطاع العام من محاكاة الواقع من خلال توليف أي شخص أو مكان أو كائن. تشمل التطبيقات المحاكاة والبيانات التركيبية لتدريب نماذج رؤية الكمبيوتر في VFX و AR / VR وإنشاء الوسائط والمحتوى.

ستتوفر القدرات البشرية الرقمية الجديدة لتحويل النص إلى ثلاثي الأبعاد لمجموعة مختارة من مختبري النسخة التجريبية بدءًا من الربع الثاني من هذا العام.

وأوضح بهزادي أن “فتح القدرة على المستخدمين الخارجيين سيسمح لنا بالاستفادة من تعليقات المجتمع لزيادة تحسين النماذج التوليدية الأساسية”. “التعلم المعزز من ردود الفعل البشرية (RLHF) هو مفتاح التحسين المستمر لأداء النماذج الأساسية واكتشاف الحالات المتطورة.”

قال بهزادي إنه من خلال الجمع بين الذكاء الاصطناعي التوليدي وخطوط أنابيب المؤثرات البصرية السينمائية ، ستكون الشركات قادرة على توليف العالم ، بما في ذلك البشر والبيئات والأشياء.

وأضاف: “نأمل في مواصلة الابتكار وتقليل العوائق أمام المطورين لإنشاء أصول وبيانات تركيبية لدفع أحدث ما توصل إليه العلم في رؤية الكمبيوتر”.