הפיצ'ר שגורם לדמויות לזוז כמו בני אדם: כל מה שחדש בAct Two של Runway

עולם הוידאו בבינה מלאכותית מתפתח בקצב מסחרר, אבל כל מי שניסה להנפיש דמות בכלי ה-AI שקיימים היום נתקל במגבלה אחת מרכזית: הדמויות לא זזות באופן מדוייק בהתאם לבקשה. בחלק מהכלים הן מרצדות, או לא מבצעות בדיוק את כל התנועות שביקשנו.

ואז הגיע Act Two של Runway, ובאמצעות יכולות Video to Video מתקדמות, הפך את מה שפעם היה ניסוי לא יציב, לחוויית וידאו דינמית, חיה ונשלטת.

סרטון השקת Act Two של Runway

מה זה בכלל Video to Video?

אם Text to Video מאפשר לנו לבקש סרטון עם תיאור מילולי, ו-Image to Video יוצר אנימציה מתמונה, Video to Video מאפשר ליצור וידאו חדש באמעות וידאו קיים. כאן אנחנו למעשה מעלים סרטון קצר, אדם הולך, מדבר, רוקד, והמערכת "שואבת" ממנו את תנועות הגוף, הבעות הפנים, הקצב והאנרגיה. זה סוג של העתקת הופעה אבל מאוד חכמה.

Act Two מאפשר להזין סרטון של שחקן אמיתי + תמונה של דמות, ומחזיר וידאו שבו הדמות מבצעת את מה שהשחקן עשה, מתנועות הגוף, הפה ועד להבעות הפנים!

איך יוצרים סרטונים עם פריימים מותאמים?

יצירת סרטונים עם פריימים של סיום מותאמים ב-Midjourney היא תהליך פשוט שמתאים גם למתחילים, והדרך הנוחה ביותר היא דרך ממשק האינטרנט:

העלאת תמונה שתשמש כפריים התחלה: היכנסו לאתר של Midjourney והעלו תמונת התחלה לחלונית "Start Frame" בסרגל העליון. תוכלו להשתמש בתמונה שיצרתם ב-Midjourney או להעלות תמונה חיצונית.

העלאת תמונה שתשמש כפריים סיום:

כעת גררו את התמונה שתרצו שתשמש כפריים סיום לחלונית "End Frame".

יצירת לולאה: כדי ליצור סרטון לולאתי, סמנו את תיבת הסימון "Loop" בפריים הסיום. זה יגרום לפריים הראשון לשמש גם כפריים האחרון, כך שהסרטון יחזור על עצמו בצורה חלקה.

כתיבת פרומפט: בשרות הפרומפט הזינו תיאור טקסטואלי של מה שאתם רוצים שיקרה בסרטון

בחירת עוצמת הנפשה: בחרו בין high לסרטון עם הרבה תנועה או ב-Low לסרטון עם תנועה יותר רגועה.

מה זה פריימים של התחלה וסיום?

בסרטונים, הפריים הראשון הוא התמונה שפותחת את הסרטון ומכינה את הצופים לחוויה, ואילו הפריים האחרון הוא זה שסוגר את הסרטון ומשאיר רושם אחרון. התכונה החדשה של Midjourney מאפשרת לכם לבחור בדיוק אילו תמונות ישמשו בתור הפריימים האלה, מה שנותן לכם שליטה על האווירה והמסר של הסרטון. לדוגמה, תוכלו להתחיל עם תמונה שלכם לבושים בבגדי יום-יום ובסיום תמונה שלכם לבושים בבגדי גיבור העל האהוב עליכם למשל.

מה מזינים למערכת ומה מקבלים?

1. העלו סרטון תנועה

וידאו קצר שבו אדם מבצע פעולה: דיבור, תנועה, משחק. זה ה-input שממנו המערכת תלמד איך להניע את הדמות.

2. צרפו תמונת דמות

כל מה שצריך כדי "להלביש" את הדמות תמונה אחת. לא סדרת זוויות, לא תיאור טקסטואלי. פשוט העלאת תמונה של מראה הדמות הרצויה. המערכת כבר תסיק לבד איך היא נראית כשהיא זזה, גם אם רואים אותה מהצד או בזוויות אחרות.

3. ומקבלים סרטון מונפש של הדמות

וזה לא מעט במיוחד כשמדובר בסרטונים ברמת רזולוציה קולנועית, עם תנועת מצלמה טבעית, קצב מדויק, וסינכרון שפתיים שנראה כאילו נערך על ידי איש מקצוע. הסרטון שמתקבל מוגבל כרגע עד 30 שניות.

לא רק תמונות: מידג'רני עוברת לעולם הוידאו!

תכירו את Act-One: הפיצ'ר החדש של Runway שיפיח חיים בדמויות שלכם

האם צריך ניסיון קודם בעריכת וידאו?

ממש לא. אחד הדברים המרעננים ב-Act Two הוא שהממשק פשוט להפליא. מעלים סרטון, מעלים תמונה, בוחרים הגדרות פשוטות וזהו. אין שכבות, אין קווים בטיימליין, אין רינדורים מסובכים. הכל קורה בענן, בלי להכביד על המחשב שלכם.

שמירה על עקביות בפריימים

אחד האתגרים הכי גדולים בעבודה עם Generative Video הוא שהתוצאה נראית אחרת בכל פריים. דמות מחליפה פרצוף, זזה פתאום בחדות, או משנה סגנון. אבל ב-Act Two האלגוריתם מקבל גם את תמונת הדמות וגם את כל רצף התנועה מראש, ומייצר את הווידאו כמקשה אחת. זה נותן תוצאה עקבית, קולחת ומקצועית יותר.

פיצ'רים נוספים נוספים של Runway

Act Two לא עומד לבד. הוא משתלב מצוין עם כלים נוספים כמו:

• Motion Brush: לשליטה ידנית באובייקטים בסצנה
• Frame Interpolation: ליצירת תנועה חלקה בין פריימים
• מודל Gen4: מודל Gen4 ליצירת וידאו מהתחלה בטקסט או תמונה

השילוב הזה מאפשר ליצור תסריט שלם מתמונה ראשונית ועד סרטון מלוטש באותו ממשק, מבלי לקפוץ בין תוכנות או פורמטים.

לסיכום

אפשר לעשות שימוש בפיצ'ר הזה הרבה יותר ממה שנדמה. הפיצ'ר החדש פותח דלת חדשה ליוצרי תוכן, אנשי קריאייטיב, מרצים, יוצרי קליפים, מאיירים דיגיטליים בעצם כל מי שצריך וידאו עם דמות שנראית כאילו באמת שיחקה בסצנה. זה יכול להיות סרטוני הסבר, סצנות אנימציה, קמפיינים שיווקיים, דמויות למשחקים הכל.

Act Two הוא לא עוד תוסף נחמד. הוא קפיצה איכותית שמקרבת את הVideo AI לשלב שבו כל אחד יכול ליצור סצנות דרמטיות, אמיתיות, עם תנועה שמרגישה אנושית. ולראשונה בלי להתפשר על איכות, עקביות או נוחות עבודה.

להתנסות ב-Runway