מטא (Meta) הכריזה על Movie Gen, מחולל וידאו חדש של 30 מיליארד פרמטרים המסוגל לייצר תמונות וסרטוני וידאו באיכות גבוהה במיוחד, לבצע עריכת וידאו באמצעות פקודות טקסט ואף להלביש את הפנים של המשתמש בוידאו מתמונה.
לצד המחולל עצמו ניתן למצוא גם את מחולל האודיו Movie Gen Audio של 13 מיליארד פרמטרים, המסוגל לייצר שמע תואם לוידאו בהתאם לטקסט של המשתמש.
כשנתיים לאחר שהציגה את מחולל הוידאו Make-A-Video, מטא מציגה את הדבר הגדול הבא בתחום מחוללי הוידאו עם ה-Movie Gen, שנועד להציג איכות וידאו גבוהה וליישר קו מול מחולל הוידאו הרבים בשוק, בהם Sora של OpenAI, מחוללי ה-Lumiere ו-Veo של גוגל, ה-Dream Machine של Luma AI ורבים אחרים.
מחולל ה-Movie Gen החדש של מטא משלב בין מחולל תמונות ווידאו, כאשר הוא מסוגל לייצר סרטוני וידאו קצרים באורך של עד 16 שניות בקצב של 16 פריימים בשנייה עם אודיו תואם באמצעות מחולל ה-Movie Gen Audio. על פי הדוגמאות השונות אותן הציגה החברה, סרטוני הוידאו מציגים איכות גבוהה ומרשימה במיוחד.
🎥 Today we’re premiering Meta Movie Gen: the most advanced media foundation models to-date.
Developed by AI research teams at Meta, Movie Gen delivers state-of-the-art results across a range of capabilities. We’re excited for the potential of this line of research to usher in… pic.twitter.com/NDOnyKOOyq
— AI at Meta (@AIatMeta) October 4, 2024
עריכת וידאו באמצעות טקסט
מלבד היכולת לייצור סרטוני וידאו מטקסט, חלק מרשים יותר אף יותר ב-Movie Gen הוא היכולת לבצע עריכת וידאו באמצעות טקסט. בדוגמה שסיפקה מטא ניתןם לראות סרטון בו המשתמש לובש משקפי מציאות מדומה, אותם אפשר להפוך באמצעות פקודת טקסט למשקפת, להסיר אותם או להוסיף בועות ברקע.
המודל אף יכול להשתמש בתמונה של המשתמש ולייצר "דיפ-פייק" שלו באותו סרטון וידאו, דבר שגם אותו המחולל החדש מסוגל לבצע לפי הדוגמאות אותן ניתן לראות באתר הרשמי.
מטא מציינת כי היא לא מתכננת לשחרר את מחולל ה-Movie Gen החדש בזמן הקרוב, אך אין ספק כי בדומה לאופן בו מחוללי התמונות עברו מהפכה בתקופה קצרה יחסית, יכולות היצירה והעריכה של וידאו באמצעות Movie Gen מעידות על קצב ההתקדמות המהיר של ה-AI גם בתחום הוידאו.
ניתן לקרוא את עבודת המחקר של מטא על המחולל בקישור.
עוקבים? כל החדשות מגאדג'טי
חלק מהפוסטים באתר כוללים קישורי תכניות שותפים, עבורם נקבל עמלה עם ביצוע רכישה בפועל של מוצרים. עמלה זו לא מייקרת את העלות הסופית של המוצרים עבורכם.
הסקירות והתכנים המופיעים באתר מהווים המלצה בלבד, וכך יש להתייחס אליהם. כל המחירים המופיעים באתר נכונים ליום הפרסום בלבד והאחריות לקניית מוצר או שירות כזה או אחר מוטלת עליך בלבד – השימוש באתר בהתאם לתנאי השימוש והפרטיות.