Runway Gen 3: ההבטחה החדשה של AI לוידאו יוצר – כל מה שאתה צריך לדעת

שורה תחתונה:

Runway Gen 3: הצצה ראשונה לכלי ה-AI החדש ליצירת וידאו

מה מייחד את Runway Gen 3?

Runway Gen 3 מצטיין ביצירת סרטוני וידאו מופשטים ומרהיבים. הצבעוניות שהכלי בוחר היא מרשימה במיוחד, והתוצאות מזכירות שומרי מסך מגניבים מלפני 15 שנה. הכלי מצליח ליצור אנימציות מופשטות מרתקות עם צבעי RGB מרהיבים, קרני לייזר צבעוניים וחלקיקים מרצדים.

בנוסף, Runway Gen 3 מצטיין ביצירת צילומי טיים לאפס. לדוגמה, הכלי הצליח ליצור סרטון מרשים של זרימת מכוניות בכביש מהיר, עם אורות אדומים מבלמים ופנסים לבנים, כך שנראה כמו חומר גלם מושלם לשימוש בסרטונים. גם יצירת טיים לאפס של הזוהר הצפוני מעל שלג הארקטי יצאה מאוד מרשימה.

מה הכלי מתקשה איתו?

כשמדובר בסרטונים הכוללים אנשים, התוצאות הן לא תמיד עקביות. הבעיה העיקרית מתעוררת כשרואים את הידיים של האנשים – כל עוד הידיים לא בפריים, הסרטון נראה טוב, אבל ברגע שהידיים נכנסות לתמונה, האיכות יורדת והסרטון הופך למעוות.

עם זאת, ברוב המקרים ניתן למצוא חלון של כמה שניות מתוך סרטון של 10 שניות שיכול לשמש כחומר b-roll איכותי. רק צריך לחתוך החוצה את החלקים הפחות טובים.

סיכום

באופן כללי, Runway Gen 3 מראה הבטחה גדולה בתחום יצירת הווידאו באמצעות AI. למרות שעדיין יש כמה ליקויים, במיוחד בסרטונים הכוללים אנשים, הכלי מצליח ליצור תוצאות מרשימות ביותר בז'אנרים מסוימים כמו אנימציה מופשטת וצילומי טיים לאפס. עם התפתחות הטכנולוגיה, סביר להניח שהכלי רק ילך וישתפר, ויהפוך לכלי חשוב ליוצרי תוכן ואמנים דיגיטליים.

היכולות המרשימות של Runway Gen 3 ביצירת וידאו אבסטרקטי ואמנותי

יצירת אנימציות מופשטות מרהיבות

Runway Gen 3 מצטיין ביצירת אנימציות מופשטות צבעוניות ומרהיבות. הכלי מצליח לשלב צבעי RGB מרשימים, קרני לייזר צבעוניים וחלקיקים מרצדים ליצירת תוצאות מרתקות שמזכירות שומרי מסך מגניבים מהעבר. הצבעוניות שהכלי בוחר היא מדהימה, והתנועה של האלמנטים השונים יוצרת אפקט היפנוטי כמעט.

דוגמה מצוינת לכך היא הסרטון שנוצר מהפקודה "colorful RGB trippy kaleidoscope mirror moving shot". התוצאה היא אנימציית קליידוסקופ מהפנטת עם צבעים חיים ותנועה מעגלית מסחררת. גם הפקודה הפשוטה יותר "colorful RGB world" הניבה סרטון מופשט מרשים, עם צבעים מלאי חיים שזורמים ומשתנים בצורה מרתקת.

יצירת צילומי טיים לאפס מרהיבים

Runway Gen 3 גם מצטיין ביצירת צילומי טיים לאפס מרשימים. לדוגמה, הפקודה "time-lapse of cars on a freeway viewed from an overpass above the freeway" יצרה סרטון מעולה של זרימת מכוניות בכביש מהיר, עם אורות אדומים מהבלמים ופנסים לבנים מהרכבים הנוסעים בכיוון השני. למרות כמה פגמים קטנים, התוצאה הכללית נראית כמו חומר גלם מצוין לשימוש בסרטונים.

דוגמה נוספת מרשימה היא הסרטון שנוצר מהפקודה "time lapse of the northern lights over the Arctic snow". אמנם תנועת המצלמה לא הייתה אידיאלית, אבל מראה הזוהר הצפוני המרצד מעל שלג הקוטב היה עוצר נשימה. שילוב הצבעים המהפנט והתנועה האיטית יצרו אווירה קסומה.

שילוב אלמנטים שונים לתמונה אחת

Runway Gen 3 מסוגל לשלב מספר אלמנטים שונים לכדי תמונה קוהרנטית אחת. כך למשל, הפקודה "a peaceful still shot on the side of a green grassy hill in Japanese temple with water stream cherry blossom trees and cherry blossom leaves falling everywhere" הצליחה ליצור סרטון שמשלב את מרבית האלמנטים המבוקשים – מקדש יפני על צלע גבעה ירוקה, זרם מים, ועצי דובדבן פורחים. אומנם עלי הדובדבן הנושרים לא ממש נראו, אבל שאר הפרטים שולבו היטב לכדי הרמוניה ויזואלית מרגיעה ויפהפייה.

דוגמה נוספת לשילוב מוצלח של אלמנטים שונים היא הסרטון שנוצר מהפקודה "cinematic Fast and Furious like shot of a nighttime rainy car race on the streets of Tokyo". התוצאה נראית כמו סצנה אותנטית ממשחק מירוצים, עם מכוניות דוהרות ברחובות רטובים של טוקיו, ואורות ניאון מרצדים ברקע. השילוב של האלמנטים השונים – הגשם, המכוניות, והאווירה הלילית – נעשה בצורה משכנעת ואמינה.

שימושים פוטנציאליים של Runway Gen 3 ליצירת קטעי b-roll

יצירת קטעי b-roll של נופים קסומים ומרהיבים

Runway Gen 3 מצטיין ביצירת קטעי וידאו קצרים של נופים מדהימים שיכולים לשמש כחומר b-roll איכותי. לדוגמה, הפקודה "time lapse of the northern lights over the Arctic snow" הניבה תוצאה מרשימה ביותר. למרות שתנועת המצלמה לא הייתה אופטימלית, מראה הזוהר הצפוני המרצד מעל שלגי הקוטב היה פשוט נפלא. שילוב הצבעים הקסום והתנועה האיטית יצרו אווירה קסומה ובלתי נשכחת.

דוגמה נוספת לנוף מרהיב שנוצר על ידי הכלי היא "a peaceful still shot on the side of a green grassy hill in Japanese temple with water stream cherry blossom trees". התוצאה משלבת מקדש יפני על צלע גבעה ירוקה לצד זרם מים ועצי דובדבן פורחים, ויוצרת הרמוניה ויזואלית מרגיעה ויפהפייה. למרות שהכלי לא הצליח לשלב את כל האלמנטים שהתבקשו בפקודה, כמו למשל עלי הדובדבן הנושרים, התמונה הכללית עדיין נראית קסומה ומושלמת לשימוש כרקע.

יצירת סצנות מרוצי מכוניות מסעירות

Runway Gen 3 גם הראה יכולות מרשימות ביצירת סצנות מרוצי מכוניות מלאות אקשן. הפקודה "cinematic Fast and Furious like shot of a nighttime rainy car race on the streets of Tokyo" הניבה תוצאה שנראית כאילו נלקחה ישירות ממשחק מירוצים. המכוניות דוהרות ברחובות הרטובים של טוקיו, ואורות הניאון מנצנצים ברקע. הכלי הצליח לשלב בצורה משכנעת את האלמנטים השונים כמו הגשם, המכוניות והאווירה הלילית, ויצר קטע וידאו מסעיר ואמין.

עוד דוגמה מוצלחת היא הסרטון שנוצר מהפקודה "time-lapse of cars on a freeway viewed from an overpass above the freeway". התוצאה נראית כמו חומר b-roll מושלם, עם זרימת מכוניות על כביש מהיר, אורות אדומים מהבלמים ופנסים לבנים מהמכוניות הנוסעות בכיוון ההפוך. מלבד כמה פגמים קטנים, כמו הטקסט המוזר על הכביש שנראה כאילו מישהו שרבט עליו בגיר, הסרטון נראה מעולה ומוכן לשימוש.

יצירת קטעי גיימפליי מגניבים

Runway Gen 3 הוכיח את עצמו גם ביצירת קטעי וידאו שנראים כאילו נלקחו ישירות ממשחקי מחשב. לדוגמה, הפקודה "point of view first person shooter video game but holding a baguette like a weapon and walking around a French bakery" הניבה תוצאה משעשעת ומדויקת. מלבד רגע אחד שבו גליל גבינה מוזר הופיע לפתע במסך, שאר הסרטון נראה בדיוק כמו מה שביקשנו – נקודת מבט של שחקן במשחק יריות מגוף ראשון, אוחז בבגט כמו נשק ומסתובב במאפייה צרפתית. אם נחתוך את החלק עם הגבינה המוזרה, נקבל קטע וידאו מצוין לשימוש.

דוגמה נוספת ליכולת של הכלי ליצור גיימפליי משכנע היא הפקודה "a humanoid robot doing the robot dance in a nightclub with colorful flashing lights". אמנם הידיים של הרובוט נראו מעוותות מדי פעם, והדמויות ברקע היו מעט מוזרות, אבל באופן כללי הסרטון נראה טוב והצליח לתפוס את האווירה של מועדון לילה עם תאורה צבעונית מהבהבת ורובוט רוקד. שוב, על ידי חיתוך החלקים הפחות מוצלחים, ניתן למצוא כמה שניות שישמשו כקטע b-roll נהדר.

המגבלות של Runway Gen 3 בתיאור דמויות אנושיות וידיים

קשיים ביצירת דמויות אנושיות

Runway Gen 3 עדיין מתקשה ליצור דמויות אנושיות מציאותיות ועקביות. כשמדובר בסרטונים הכוללים אנשים, התוצאות הן לא תמיד משביעות רצון. הבעיה העיקרית מתעוררת כשרואים את הידיים של האנשים – כל עוד הידיים לא בפריים, הסרטון נראה טוב יחסית, אבל ברגע שהידיים נכנסות לתמונה, האיכות יורדת והסרטון הופך למעוות.

לדוגמה, בסרטון של "אדם רוקד במועדון", הידיים של הרקדן נראות מוזרות ולא טבעיות. הן משנות צורה ומתעוותות בצורה לא הגיונית. גם הפנים של האדם לא תמיד נראות עקביות ולפעמים משתנות באופן פתאומי. למרות שהרקע והתאורה נראים טוב, הדמות האנושית עצמה עדיין בעייתית.

בעיות בתיאור ידיים

נראה שה-AI מתקשה במיוחד ליצור תיאורים מדויקים של ידיים אנושיות. גם כשהדמות עצמה נראית סבירה, הידיים בדרך כלל נראות מוזרות, מעוותות או לא פרופורציונליות. הן עשויות להיות גדולות או קטנות מדי ביחס לגוף, או בעלות אצבעות מעוקמות בצורה לא טבעית.

זה בולט במיוחד בסרטונים שבהם הידיים אמורות לבצע פעולה ספציפית, כמו להחזיק חפץ. לדוגמה, בסרטון של "מבט מגוף ראשון במשחק יריות, אבל מחזיק בגט כמו נשק", הבגט נראה מרחף בצורה מוזרה מול המסך ולא באמת מוחזק ביד. הוא גם משנה זווית ומיקום בצורה לא עקבית.

סיכום

למרות ההתקדמות המרשימה של Runway Gen 3 ביצירת סרטונים בז'אנרים מסוימים, עדיין יש לו קשיים משמעותיים בתיאור דמויות אנושיות אמינות, ובמיוחד בהצגת ידיים. כל עוד הדמויות לא מרכזיות בפריים או שהידיים לא גלויות, אפשר לקבל תוצאות טובות. אבל ברגע שמנסים ליצור אינטראקציה אנושית מורכבת יותר, הכלי מגיע למגבלותיו.

עם זאת, סביר להניח שעם ההתפתחות המהירה של טכנולוגיית ה-AI, בעיות אלו ילכו ויצטמצמו בעתיד הקרוב. בינתיים, חשוב להכיר במגבלות הכלי ולהשתמש בו בהתאם, תוך מודעות ליכולותיו ולחסרונותיו. עדיין ניתן למצוא חלונות קצרים בתוך הסרטונים שיכולים לשמש כחומרי b-roll שימושיים, גם אם הסרטון כולו אינו מושלם.

מתי צפוי השחרור הרחב של Runway Gen 3 לקהל הרחב?

בשלב זה, Runway לא נתנו תאריך מדויק לשחרור הרחב של Gen 3 לקהל הרחב. עם זאת, ניתן להעריך את מסגרת הזמן בהתבסס על ההיסטוריה של שחרורי כלים קודמים שלהם.

תבנית השחרור של כלי AI חדשים של Runway

באופן טיפוסי, כאשר Runway משחררת כלי AI חדש, הם נותנים תחילה גישה מוקדמת לקבוצה נבחרת של יוצרים במסגרת "תוכנית השותפים היצירתיים" שלהם. יוצרים אלו מקבלים הזדמנות לנסות את הכלי, לבדוק את יכולותיו ולתת משוב לצוות הפיתוח.

לאחר שהיוצרים משחקים עם הכלי במשך כמה ימים או שבועות, Runway בדרך כלל משחררת אותו לקהל הרחב. המעבר מגישה מוקדמת לשחרור מלא נמשך לרוב שבוע עד שבועיים.

מה אומרים ב-Runway על מועד השחרור של Gen 3?

כשנשאלו ישירות לגבי מועד השחרור המתוכנן של Gen 3 לקהל הרחב, נציגי Runway אמרו שהם עדיין לא יכולים לתת תאריך מדויק. הם עצמם לא בטוחים בדיוק מתי זה יקרה, אבל ציינו שבדרך כלל זה קורה תוך שבועות ספורים מהרגע שהיוצרים מקבלים גישה.

מכיוון שהיוצרים בתוכנית השותפים היצירתיים כבר קיבלו גישה ל-Gen 3 לפני מספר ימים, סביר להניח שהשחרור המלא לא רחוק מדי באופק. אם נלך לפי התבנית הרגילה של Runway, נראה שהשחרור הרחב צפוי להתרחש בתוך השבועיים הקרובים.

מה אפשר לעשות בינתיים?

בזמן שמחכים לשחרור הרשמי של Gen 3, יש כמה דברים שאפשר לעשות כדי להתכונן:

1. לעקוב אחר העדכונים והפרסומים של Runway ברשתות החברתיות ובבלוג שלהם, שם סביר שיודיעו על מועד השחרור הרשמי.

2. ללמוד על היכולות של הכלי מהסרטונים והדוגמאות ששיתפו היוצרים שכבר יש להם גישה. זה יעזור להבין מה אפשר ליצור עם Gen 3 ולתכנן פרויקטים עתידיים.

3. להתנסות בכלי AI אחרים ליצירת וידאו כדי להתרגל לתהליך העבודה ולחדד את כישורי כתיבת ההנחיות (prompts). ככל שתצברו יותר ניסיון, תוכלו להפיק את המיטב מ-Gen 3 כשהוא ישוחרר.

4. להירשם לרשימת ההמתנה או לניוזלטר של Runway, אם יש כזה, כדי לקבל עדכון ישירות כשהכלי יהיה זמין לכולם.

בסופו של דבר, למרות שאין עדיין תאריך מדויק, נראה שהשחרור של Runway Gen 3 לקהל הרחב לא רחוק. עם ההתרגשות שהכלי מייצר כבר עכשיו, סביר להניח שהוא יהפוך במהרה לכלי פופולרי ליוצרי תוכן ואמנים כאחד. העתיד של יצירת וידאו בינה מלאכותית נראה מבטיח מתמיד.