Kling O1 המודל המולטימודאלי המאוחד הראשון בעולם ליצירת וידאו עם בינה מלאכותית
מודל ה-Kling O1 מסמן נקודת מפנה משמעותית בעולם הבינה המלאכותית היוצרת, במיוחד בתחום יצירת ועריכת הווידאו. הוא מוצג כמודל הווידאו
השאירו פרטים לחזרה
Runway Act Two: איך להזיז דמויות ב-AI כמו בני אדם
עולם הוידאו בבינה מלאכותית מתפתח בקצב מסחרר, אבל כל מי שניסה להנפיש דמות בכלי ה-AI שקיימים היום נתקל במגבלה אחת מרכזית: הדמויות לא זזות באופן מדוייק בהתאם לבקשה. בחלק מהכלים הן מרצדות, או לא מבצעות בדיוק את כל התנועות שביקשנו.
ואז הגיע Act Two של Runway, ובאמצעות יכולות Video to Video מתקדמות, הפך את מה שפעם היה ניסוי לא יציב, לחוויית וידאו דינמית, חיה ונשלטת.
סרטון השקת Act Two של Runway
מה זה בכלל Video to Video?
אם Text to Video מאפשר לנו לבקש סרטון עם תיאור מילולי, ו-Image to Video יוצר אנימציה מתמונה, Video to Video מאפשר ליצור וידאו חדש באמעות וידאו קיים. כאן אנחנו למעשה מעלים סרטון קצר, אדם הולך, מדבר, רוקד, והמערכת “שואבת” ממנו את תנועות הגוף, הבעות הפנים, הקצב והאנרגיה. זה סוג של העתקת הופעה אבל מאוד חכמה.
Act Two מאפשר להזין סרטון של שחקן אמיתי + תמונה של דמות, ומחזיר וידאו שבו הדמות מבצעת את מה שהשחקן עשה, מתנועות הגוף, הפה ועד להבעות הפנים!
איך יוצרים סרטונים עם פריימים מותאמים?
יצירת סרטונים עם פריימים של סיום מותאמים ב-Midjourney היא תהליך פשוט שמתאים גם למתחילים, והדרך הנוחה ביותר היא דרך ממשק האינטרנט:
העלאת תמונה שתשמש כפריים התחלה: היכנסו לאתר של Midjourney והעלו תמונת התחלה לחלונית “Start Frame” בסרגל העליון. תוכלו להשתמש בתמונה שיצרתם ב-Midjourney או להעלות תמונה חיצונית.
העלאת תמונה שתשמש כפריים סיום:
כעת גררו את התמונה שתרצו שתשמש כפריים סיום לחלונית “End Frame”.
יצירת לולאה: כדי ליצור סרטון לולאתי, סמנו את תיבת הסימון “Loop” בפריים הסיום. זה יגרום לפריים הראשון לשמש גם כפריים האחרון, כך שהסרטון יחזור על עצמו בצורה חלקה.
כתיבת פרומפט: בשרות הפרומפט הזינו תיאור טקסטואלי של מה שאתם רוצים שיקרה בסרטון
בחירת עוצמת הנפשה: בחרו בין high לסרטון עם הרבה תנועה או ב-Low לסרטון עם תנועה יותר רגועה.
מה זה פריימים של התחלה וסיום?
בסרטונים, הפריים הראשון הוא התמונה שפותחת את הסרטון ומכינה את הצופים לחוויה, ואילו הפריים האחרון הוא זה שסוגר את הסרטון ומשאיר רושם אחרון. התכונה החדשה של Midjourney מאפשרת לכם לבחור בדיוק אילו תמונות ישמשו בתור הפריימים האלה, מה שנותן לכם שליטה על האווירה והמסר של הסרטון. לדוגמה, תוכלו להתחיל עם תמונה שלכם לבושים בבגדי יום-יום ובסיום תמונה שלכם לבושים בבגדי גיבור העל האהוב עליכם למשל.
מה מזינים למערכת ומה מקבלים?
1. העלו סרטון תנועה
וידאו קצר שבו אדם מבצע פעולה: דיבור, תנועה, משחק. זה ה-input שממנו המערכת תלמד איך להניע את הדמות.
2. צרפו תמונת דמות
כל מה שצריך כדי “להלביש” את הדמות תמונה אחת. לא סדרת זוויות, לא תיאור טקסטואלי. פשוט העלאת תמונה של מראה הדמות הרצויה. המערכת כבר תסיק לבד איך היא נראית כשהיא זזה, גם אם רואים אותה מהצד או בזוויות אחרות.
3. ומקבלים סרטון מונפש של הדמות
וזה לא מעט במיוחד כשמדובר בסרטונים ברמת רזולוציה קולנועית, עם תנועת מצלמה טבעית, קצב מדויק, וסינכרון שפתיים שנראה כאילו נערך על ידי איש מקצוע. הסרטון שמתקבל מוגבל כרגע עד 30 שניות.
האם צריך ניסיון קודם בעריכת וידאו?
ממש לא. אחד הדברים המרעננים ב-Act Two הוא שהממשק פשוט להפליא. מעלים סרטון, מעלים תמונה, בוחרים הגדרות פשוטות וזהו. אין שכבות, אין קווים בטיימליין, אין רינדורים מסובכים. הכל קורה בענן, בלי להכביד על המחשב שלכם.
איך Act Two שומר על עקביות בפריימים?
Act Two שומר על עקביות בפריימים על ידי קבלת תמונת הדמות ורצף התנועה מראש, ומייצר את הווידאו כמקשה אחת. אחד האתגרים הגדולים בעבודה עם Generative Video הוא שהתוצאה נראית אחרת בכל פריים, עם דמות שמחליפה פרצוף, זזה בחדות, או משנה סגנון. אך ב-Act Two, האלגוריתם מקבל את כל הנתונים מראש, מה שנותן תוצאה עקבית, קולחת ומקצועית יותר.
אילו פיצ'רים נוספים מציעה Runway?
Runway מציעה פיצ'רים נוספים המשולבים עם Act Two, כגון Motion Brush לשליטה ידנית באובייקטים בסצנה, Frame Interpolation ליצירת תנועה חלקה בין פריימים, ומודל Gen4 ליצירת וידאו מהתחלה בטקסט או תמונה. שילוב זה מאפשר ליצור תסריט שלם מתמונה ראשונית ועד סרטון מלוטש באותו ממשק, מבלי לקפוץ בין תוכנות או פורמטים.
למי מיועד Act Two של Runway ומהם יתרונותיו המרכזיים?
Act Two של Runway מיועד ליוצרי תוכן, אנשי קריאייטיב, מרצים, יוצרי קליפים, מאיירים דיגיטליים וכל מי שצריך וידאו עם דמות שנראית כאילו באמת שיחקה בסצנה. היתרונות המרכזיים כוללים פתיחת דלת חדשה ליצירת סרטוני הסבר, סצנות אנימציה, קמפיינים שיווקיים ודמויות למשחקים. Act Two הוא קפיצה איכותית שמקרבת את ה‑Video AI לשלב שבו כל אחד יכול ליצור סצנות דרמטיות, אמיתיות, עם תנועה שמרגישה אנושית, ללא פשרות על איכות, עקביות או נוחות עבודה.