Pikadditions: הפיצ’ר שמטשטש את הגבול בין מציאות לדמיון
Pika Labs ממשיכה להפתיע עם פיצ’ר חדש בשם Pikadditions, שמביא לראשונה יכולות אינטגרציה פורצות דרך בעולם יצירת הווידאו באמצעות בינה
השאירו פרטים לחזרה
ההשקה של Runway Gen-4: עולים שלב ביצירת וידאו באמצעות בינה מלאכותית
חברת Runway השיקה לאחרונה את Gen-4, הדור הבא של מודל הבינה המלאכותית שלהם לייצור וידאו, המציג יכולות מהפכניות בשליטה ועקביות ביצירת וידאו מתמונות וטקסטים. המערכת החדשנית מביאה בשורה משמעותית לעולם היצירה עם בינה מלאכותית, עם יכולת להשתלב בצורה חלקה לצד תוכן חי, אנימציה ואפקטים מיוחדים.
השקת Runway Gen-4
מה חדש ב-Gen-4?
Gen-4 מאפשר יצירת וידאו מהירה, גמישה ונשלטת שיכולה להשתלב בצורה חלקה עם צילומים חיים, אנימציה ותוכן VFX. המערכת מייצרת סרטוני וידאו באורכים של 5 או 10 שניות על בסיס תמונת קלט והנחיות טקסטואליות שהמשתמש מספק.
המודל החדש נפרס בשלבים למשתמשים בתוכניות בתשלום, כאשר ההשקה המלאה צפויה להיות זמינה בהדרגה לכלל המשתמשים המשלמים.
יכולות הסטוריטיילינג המהפכניות
אחד החידושים המשמעותיים ביותר ב-Gen-4 הוא היכולת לשמור על עקביות של דמויות, מיקומים ואובייקטים לאורך סצנות שונות – התקדמות משמעותית ליישומי סטוריטלינג. המודל שומר על סגנון, אווירה ואלמנטים קולנועיים תוך מתן אפשרות ליוצרים לייצר מחדש אלמנטים מנקודות מבט ומיקומים שונים בתוך הסצנות.
“עם Gen-4, תוכלו לייצר במדויק דמויות, מיקומים ואובייקטים עקביים לאורך סצנות,” מציינת Runway בחומרי ההשקה שלהם. “פשוט קבעו את המראה והתחושה הרצויים והמודל ישמור על סביבות עולם קבועות תוך שמירה על הסגנון הייחודי, האווירה והאלמנטים הקולנועיים של כל פריים.”
יכולות מרכזיות של Gen-4
המודל החדש מציג מספר יכולות פורצות דרך!
1. דמויות עקביות:יצירת דמויות עקביות במגוון תנאי תאורה ומיקומים באמצעות תמונת התייחסות בודדת. היכולת לייצר אותן הדמויות בסצנות שונות ובזוויות שונות מהווה פריצת דרך משמעותית.
2. אובייקטים עקביים:מיקום של כל אובייקט או נושא בכל מיקום או תנאי שתזדקקו לו. בין אם אתם יוצרים סצנות לתוכן נרטיבי ארוך או מייצרים צילומי מוצר, Gen-4 הופך את התהליך לפשוט ועקבי לאורך סביבות שונות.
3. כיסוי מרובה זוויות:לקבל כל זווית של כל סצנה. כדי ליצור סצנה, פשוט ספקו תמונות התייחסות של הנושאים שלכם ותארו את הקומפוזיציה של הצילום. Gen-4 יעשה את השאר.
4. וידאו מוכן לייצור:סטנדרט חדש לאיכות והבנת שפה בייצור וידאו. Gen-4 מצטיין ביכולתו לייצר וידאו דינמי ביותר עם תנועה ריאליסטית, עקביות של נושאים, אובייקטים וסגנון, עם היצמדות עליונה להנחיות והבנה מעולה של העולם.
5. פיזיקה מתקדמת:צעד לקראת מודלים גנרטיביים אוניברסליים המבינים את העולם. Gen-4 מייצג אבן דרך משמעותית ביכולת של מודלים גנרטיביים חזותיים לדמות פיזיקה של העולם האמיתי.
6. GVFX (Generative Visual Effects):סוג חדש של אפקטים חזותיים. ייצור וידאו מהיר, נשלט וגמיש שיכול להשתלב בצורה חלקה לצד צילומים חיים, אנימציה ותוכן VFX.
1. דמויות עקביות:יצירת דמויות עקביות במגוון תנאי תאורה ומיקומים באמצעות תמונת התייחסות בודדת. היכולת לייצר אותן הדמויות בסצנות שונות ובזוויות שונות מהווה פריצת דרך משמעותית.
2. אובייקטים עקביים:מיקום של כל אובייקט או נושא בכל מיקום או תנאי שתזדקקו לו. בין אם אתם יוצרים סצנות לתוכן נרטיבי ארוך או מייצרים צילומי מוצר, Gen-4 הופך את התהליך לפשוט ועקבי לאורך סביבות שונות.
3. כיסוי מרובה זוויות:לקבל כל זווית של כל סצנה. כדי ליצור סצנה, פשוט ספקו תמונות התייחסות של הנושאים שלכם ותארו את הקומפוזיציה של הצילום. Gen-4 יעשה את השאר.
4. וידאו מוכן לייצור:סטנדרט חדש לאיכות והבנת שפה בייצור וידאו. Gen-4 מצטיין ביכולתו לייצר וידאו דינמי ביותר עם תנועה ריאליסטית, עקביות של נושאים, אובייקטים וסגנון, עם היצמדות עליונה להנחיות והבנה מעולה של העולם.
5. פיזיקה מתקדמת:צעד לקראת מודלים גנרטיביים אוניברסליים המבינים את העולם. Gen-4 מייצג אבן דרך משמעותית ביכולת של מודלים גנרטיביים חזותיים לדמות פיזיקה של העולם האמיתי.
6. GVFX (Generative Visual Effects):סוג חדש של אפקטים חזותיים. ייצור וידאו מהיר, נשלט וגמיש שיכול להשתלב בצורה חלקה לצד צילומים חיים, אנימציה ותוכן VFX.
אז איך יוצרים עם Gen-4?
שלב 1 - ניסוח ההנחיה (Prompt)
1. התחילו בבחירת “Generate Video” מדף הבית של לוח המחוונים שלכם.
2. ודאו שמודל Gen-4 פעיל בבורר המודלים הממוקם בפינה השמאלית התחתונה.
3. העלו את תמונת הקלט שלכם, שהיא הכרחית במודל Gen-4.
4. תמונת הקלט קובעת את נקודת ההתחלה החזותית של כל התהליך הגנרטיבי ומשמשת כפריים הראשון של סרטון הפלט.
5. לאחר העלאת, בחירת או יצירת תמונת הקלט, התחילו לנסח את הנחיית הטקסט שלכם.
6. מכיוון שהתמונה מעבירה מידע חזותי מרכזי על נושאים, קומפוזיציה, צבעים, תאורה וסגנון, הנחיית הטקסט שלכם צריכה להתמקד כמעט לחלוטין בתיאור התנועה הרצויה.
שלב 2 - הגדרות
1. משך זמן:
בחרו בין 5 שניות או 10 שניות לסרטון
2. רזולוציה:
16:9 — 1280×720 פיקסלים 9:16 — 720×1280 פיקסלים 1:1 — 960×960 פיקסלים 4:3 — 1104×832 פיקסלים 3:4 — 832×1104 פיקסלים 21:9 — 1584×672 פיקסלים
3. סיד קבוע (Fixed seed):
אפשרות לקבע את הסיד כדי לאפשר שחזור של תוצאות דומות
בחרו בין 5 שניות או 10 שניות לסרטון
2. רזולוציה:
16:9 — 1280×720 פיקסלים 9:16 — 720×1280 פיקסלים 1:1 — 960×960 פיקסלים 4:3 — 1104×832 פיקסלים 3:4 — 832×1104 פיקסלים 21:9 — 1584×672 פיקסלים
3. סיד קבוע (Fixed seed):
אפשרות לקבע את הסיד כדי לאפשר שחזור של תוצאות דומות
שלב 3 - יצירת וידאו ושיפור
1. לחצו על כפתור “Generate” כדי להתחיל את תהליך הייצור
2. הייצורים שלכם יהיו ניתנים לגלילה דרך הסשן שלכם תוך כדי שאתם ממשיכים לייצר.
3. תוכלו גם לגשת לסרטונים שהושלמו ב”Assets” שלכם, שם הם יישמרו כברירת מחדל בתת-התיקייה המשויכת בתוך תיקיית “Sessions”.
לאחר שהסרטון נוצר, תוכל לשפר את התוצאות ולבצע שינויים נוספים:
Restyle: שינוי סגנון הסרטון
Expand: הרחבת הסרטון
Adjust Video: התאמת פרמטרים של הסרטון
Lip Sync: סנכרון שפתיים
Use current frame: שימוש בפריים הנוכחי
Upscale to 4K: שיפור רזולוציה ל-4K
כמה זה עולה?
Runway Gen-4 זמין כרגע רק למנויים בתשלום.
שדרוג לחבילת הבסיס מעניק לך גישה מורחבת תמורת $15 לעורך בחודש.
החבילה כוללת אפשרות להשתמש ב-Gen-4, Gen-3 Alpha ו-Act-One, הסרת סימני מים, שדרוג סרטונים לאיכות 4K, וזמני המתנה קצרים יותר. מדי חודש יתחדשו לך 625 נקודות זכות (יצירה מנצלת 12 קרדיטים לשנייה, כלומר, סרטון של 5 שניות יצרוך 60 קרדיטים וסרטון של 10 שניות יצרוך 120 קרדיטים), עם אפשרות לרכוש נקודות נוספות לפי הצורך.
סרטון קצר מבית Runway שממחיש את יכולות Gen-4
כמה סרטונים מדהימים שנוצרו ב-Gen-4:
לסיכום
Gen-4 של Runway מייצג קפיצת מדרגה משמעותית ביכולות ייצור הווידאו באמצעות בינה מלאכותית. עם יכולות עקביות חסרות תקדים, שליטה מדויקת והבנה טובה יותר של העולם הפיזי, המודל פותח אפשרויות חדשות לספר סיפורים חזותיים.
היכולת לייצר תוכן וידאו איכותי בצורה מהירה וגמישה, עם דמויות ואובייקטים עקביים לאורך סצנות שונות, מאפשרת ליוצרים להתמקד יותר ביצירתיות ופחות באילוצים טכניים. עם Gen-4, Runway ממשיכה לדחוף את גבולות האפשר בתחום היצירה הדיגיטלית ומציבה סטנדרט חדש לתעשייה כולה.