Act-One: מהפכה בהנפשת דמויות מבוססות וידאו
חברת Runway הכריזה על כלי חדש בשם Act-One, שמיועד לשנות את הדרך שבה אמנים יוצרים דמויות מונפשות ריאליסטיות ומלאות הבעה. הכלי החדש מתבסס על ביצועי וידאו של שחקנים ומתרגם אותם לאנימציות דינמיות ומדויקות, זאת ללא צורך בציוד מורכב כמו לכידת תנועה או מערכת עיבוד מתקדמת. היכולת להפיק אנימציות עם אמוציות מורכבות באמצעות מצלמה ביתית בלבד, מציגה אפשרות חדשה ומלהיבה לאמנים, יוצרים ותעשיית הבידור.
השימוש במודל מבוסס וידאו עם יכולות מתקדמות של בינה מלאכותית מאפשר לתרגם את כל ניואנס של השחקנים, כגון קווי העין, הבעות פנים קטנות וקצב דיבור, לאנימציות נאמנות למציאות. בזכות Act-One, המודל החדש מביא שינוי בתהליכי העבודה המסורתיים בתחום האנימציה.
מהפכה בתחום לכידת התנועה וההנפשה
שיטות מסורתיות ליצירת אנימציות פנים דורשות ציוד לכידת תנועה, הפניות רבות וציוד מורכב. תהליך זה, הדורש שילוב של אמצעים שונים, נועד לשמר את הרגש והניואנסים של הביצוע המקורי. עם זאת, Act-One מציג גישה אחרת לגמרי: הוא נשען אך ורק על הביצוע המצולם של השחקן, מה שמפשט את התהליך כולו ומאפשר גמישות רבה יותר ליוצרים.
שחקנים יכולים לצלם את עצמם באמצעות מצלמה פשוטה, והביצועים הללו משמשים להנפיש דמויות שנוצרו דיגיטלית, תוך שמירה על הבעות פנים מציאותיות ודיוק גבוה בהעברת הרגש והאנרגיה של השחקן. אמנם כבר יצא כלי של LivePortrait שמאפשר מעקב אחר תנועות פנים, אך האפשרות להעביר תנועות שפתיים בדיבור היו מאד מוגבלות. כאן אפשר לראות דוגמא שפרסמתי בזמנו עם דני קושמרו.
מגוון דמויות ועיצוב יצירתי
Act-One מציע גמישות חסרת תקדים בכך שהוא מאפשר ליצור דמויות מונפשות בפרופורציות שונות מהמופע המקורי של השחקן. הכלי מצליח לשמר את ריאליסטיות התנועות והבעות הפנים גם כאשר הדמות שונה מהותית במבנה ובצורה מהשחקן שמבצע את הביצועים. יכולת זו פותחת דלת לעיצובי דמויות יצירתיים ושונים באופן שלא היה אפשרי קודם לכן.
שדרוג בקולנוע ותוכן וידאו
מעבר ליצירת דמויות מצוירות או מונפשות, Act-One מצטיין גם ביצירת תוכן קולנועי ריאליסטי ומורכב, ומאפשר יצירת דיאלוגים בין דמויות שונות עם שחקן אחד בלבד. בעזרת מצלמה פשוטה, ניתן להפיק סצנות דיאלוג ריאליסטיות כאשר אותו שחקן מבצע תפקידים שונים, מה שמאפשר יצירת תוכן נרטיבי ברמה גבוהה בקלות יחסית.
מה צפוי לנו בעתיד?
Act-One מהווה צעד משמעותי קדימה בעולם האנימציה והבידור, ומאפשר גישה קלה יותר לטכנולוגיות שפעם היו שמורות רק לתעשיות עתירות משאבים. Runway מתכוונת להרחיב את השימוש בכלי ולשחרר אותו באופן הדרגתי למשתמשים ברחבי העולם. עם התקדמות המוצר, נפתחו הזדמנויות חדשות עבור אמנים ויוצרים ליצור דמויות וסיפורים מורכבים ומלאי רגש בצורה קלה ומהירה יותר. אה, רק משהו אחד קטן… הכלי עדיין לא הושק, ונראה שהם עדיין עובדים על אמצעי בטיחות שימנעו שימוש לא ראוי (דיפ-פייק). מהניסיון שלי ראנוויי לרוב עומדים מאחורי הטיזרים שלהם, אז נקווה לקבל גישה בקרוב.
