קבלו הפתעה, חברת Runway מניו יורק עושה קאמבק חזק!
פחות משבוע לאחר ש-Luma Labs שחררה את Dream Machine, המתחרה הקרובה שלה, Runway מדביקה את הקצב עם מחולל הווידאו AI החדש והחזק ביותר שלה, Gen-3 Alpha.
עברה יותר משנה מאז הוציאה Runway את Gen-2 ומאז הושקו מודלי וידאו רבים וטובים בהרבה כמו Sora, Kling ו-Dream Machine.
רבים, כולל אני, תהו – מה קורה עם Runway? מתי הם מתכוונים לשחרר יורש ל-Gen-2?
ובכן, עכשיו, קיבלנו את התשובות שלנו. בפעם הראשונה שראיתי את הסרטונים שנוצרו עם Gen-3 Alpha, התרשמתי מאוד מרמת הפוטוריאליזם והעקביות המדויקת בתוצאות.
מה זה Gen-3 Alpha?
Gen-3 Alpha מאפשר למשתמשים ליצור קטעי וידאו איכותיים, מפורטים וריאליסטיים מאוד (באורך 10 שניות) עם דיוק גבוה ומגוון של הבעות רגשיות ותנועות מצלמה.
Gen-3 Alpha הוא הראשון בסדרת מודלים חדשה שאומנה על ידי Runway על בסיס תשתית חדישה המיועדת לאימון מולטי-מודאלי בקנה מידה גדול. הוא מציע שיפורים משמעותיים בנאמנות, עקביות ותנועה בהשוואה ל-Gen-2.
תסתכלו על הדוגמאות האלה:
מה חדש ב-Gen-3 Alpha?
Gen-3 Alpha עמוס בכמה שדרוגים ענקיים מקודמיו. הנה כמה מהבחירות המובילות שלי:
- מחולל אנושי פוטוריאליסטי: זה אולי השדרוג המובהק ביותר. Gen-3 Alpha מסוגל כעת ליצור דמויות אנושיות מציאותיות עם מגוון רחב של פעולות, מחוות ורגשות.
- נאמנות ועקביות משופרים: ל-Gen-3 Alpha יש שדרוג משמעותי באיכות הסרטונים שנוצרו. המודל החדש משיג קוהרנטיות בזמן הרצה בצורה יוצאת דופן, מה שגורם למעברים ולזרימה הכוללת של הסרטונים להיראות טבעיים וחלקים יותר.
- בקרת זמן עדינה: אחת התכונות הבולטות של Gen-3 Alpha היא היכולת שלו להתמודד עם כיתובים תיאוריים מאוד, צפופים בזמן. יכולת זו מאפשרת מעברים מלאים בדמיון ומעברי פריימים מדויק של אלמנטים בתוך סצנה.
- יכולות מולטי-מודאליות: המודל לא רק מייצר סרטונים! הוא תומך במצבי קלט שונים כגון תמונה לווידאו וטקסט לתמונה.
- התאמה אישית: בקרוב, כצרכנים, נוכל ליצור גרסאות מותאמות אישית של מודלי Gen-3. בדיוק כמו Stable Diffusion, ניתן לכוונן מודלי וידאו כדי ליצור סרטונים עם סגנונות מותאמים אישית.
כיצד לגשת ל-Gen-3 Alpha?
נכון לכתיבת שורות אלו, אין עדיין תאריך שחרור מדויק, כרגע Runway מציגה רק סרטוני הדגמה באתר האינטרנט ובחשבון שלה ב-X. כמו כן, לא ברור אם הוא יהיה זמין דרך התוכנית החינמית של Runway או האם יידרש מנוי בתשלום כדי לגשת אליו.
לפי ה-CTO של Runway, מודל Gen-3 יפעיל את כל כלי הבינה המלאכותית הקיימים של Runway.
״Runway Gen-3 Alpha יהיה זמין בקרוב במוצרי Runway, ויפעיל את כל המצבים הקיימים אליהם אתם רגילים (טקסט לווידאו, תמונה לווידאו, וידאו לווידאו), וכמה חדשים כאלה שרק עכשיו אפשריים עם מודל בסיס חזק יותר.״
ובעלי עסקים או ארגונים גדולים המעוניינים בכוונון מתקדם ומודלים מותאמים אישית, ניתן לפנות אל Runway באמצעות הטופס הזה.
עידכון מה-1 ביולי: Gen-3 Alpha פתוח לכולם!
המחשבות שלי על Gen-3 Alpha של Runway
זה נהדר לראות את אחת החברות הראשונות ששיחרה לציבור מודלי וידאו בינה מלאכותית עושה קאמבק. וזה נראה ברור ש-Runway לא מוותרת על המאבק להיות שחקן דומיננטי או מנהיג במרחב יצירת סרטוני AI המתפתח במהירות.
עם זאת, חשוב לזכור שהדוגמאות הללו נבחרו באופן ידני. מי יודע כמה ניסיונות נדרשו כדי להשיג איכות מסוג זה? המבחן האמיתי של היכולות של Gen-3 Alpha יגיע כאשר הוא ישוחרר לציבור. אז עדיין אל תתרשמו יתר על המידה מהדוגמאות.
בפער, הנה רשימת 5 המובילים שלי עבור מחוללי וידאו בינה מלאכותית המבוססת על פרמטר של איכות וקוהרנטיות בלבד:
- OpenAI Sora
- Runway Gen-3 Alpha
- Kuaishou Kling
- Luma Labs Dream Machine
- Google Veo
ההייפ סביב Sora של OpenAI נשחק עם השחרור של המתחרים האלו. אולי הגיע הזמן ש-OpenAI ישחרר גישה נרחבת למודל הווידאו AI שלהם.