⭐ נקודות עיקריות
- דקארט הישראלית מציגה את Lucy 2 – מודל AI ליצירת וידאו בזמן אמת.
- וידאו חי ברזולוציית 1080p וב-30 פריימים לשנייה, כמעט ללא השהייה.
- המערכת מבינה עומק ותנועה ללא מנוע תלת-ממד מסורתי.
- מיועדת לסטרימינג, חוויות אינטראקטיביות ואימון רובוטים בעלות נמוכה.
הסטארטאפ הישראלי Decart AI (“דקארט”) הכריז על Lucy 2 (או Lucy 2.0), מודל בינה מלאכותית חדש ליצירת וידאו חי, שמנסה לשנות את הדרך בה מייצרים ועורכים וידאו גנרטיבי.
בניגוד למרבית הכלים הקיימים כיום, שעובדים בעיבוד בדיעבד ודורשים זמן המתנה עד ליצירת הוידאו, Lucy 2 פועל בזמן אמת ומאפשר לבצע שינויים בווידאו תוך כדי סטרימינג בשידור חי, וברזולוציה של עד 1080p.
הכירו את Lucy 2.0
החידוש המרכזי ב-Lucy 2 הוא היכולת לבצע עריכה מורכבת על וידאו חי, מבלי להסתמך על מנועי תלת-ממד, מיפוי עומק או סימולציות פיזיקליות כבדות.
במקום זאת, המודל לומד את חוקי התנועה והאינטראקציה מתוך צפייה בווידאו עצמו. בדקארט מתארים זאת כ”פיזיקה מגיחה” (Emergent Physics) – יכולת להבין כיצד אובייקטים אמורים להתנהג בעולם האמיתי, גם ללא הגדרות מוקדמות.
כך למשל, כאשר רוכסן של מעיל נפתח, המערכת יוצרת קפלים טבעיים בבד, וכאשר קסדה מוסרת מהראש, השיער שמתחתיה משוחזר באופן עקבי. את כל זה מבצע המודל החדש באופן אוטומטי, ללא תיוג ידני של אובייקטים או חוקים פיזיקליים המוגדרים מראש.
כדי לשמור על יציבות לאורך זמן, דקארט פיתחה מנגנון בשם Smart History Augmentation, שנועד למנוע עיוותים מצטברים או “סחף” של הדמויות והסביבה.
המערכת מסוגלת לזהות מצבים לא סבירים ומתקנת את עצמה בזמן אמת, מה שמאפשר סטרימינג רציף גם לאורך שעות.
ביצועים
לפי נתוני החברה, Lucy 2 מסוגל לייצר וידאו ברזולוציית 1080p ובקצב של 30 פריימים לשנייה עם השהייה מזערית.
התוצאה מתקבלת באמצעות אופטימיזציה עמוקה של כל שרשרת העיבוד, כולל ניהול יעיל של הזיכרון ותשתית תקשורת מותאמת להזרמה בזמן אמת.
מעבר לביצועים, אחד הצדדים הבולטים הוא העלות. בעוד שבעבר מערכות דומות דרשו מאות דולרים לשעת עבודה, דקארט מדברת על עלות של כ-3 דולרים לשעה בלבד.
נתון זה פותח את הדלת לשימוש רציף בטכנולוגיה גם עבור יוצרי תוכן ויישומים מסחריים בקנה מידה רחב.
יכולות נוספות
Lucy 2 מאפשר מגוון שימושים בזמן אמת, בהם החלפת דמויות, שינוי סביבות, הלבשה וירטואלית (Virtual Try-on) והטמעת מוצרים בתוך שידורים חיים. כל הפעולות מבוצעות באמצעות פקודות טקסט ותמונות רפרנס.
החברה כבר בוחנת את המערכת עם יוצרי תוכן בפלטפורמת Twitch, שם היא מגיבה בזמן אמת לתנועות הסטרימר ולבקשות הקהל, כחלק מחוויית שידור אינטראקטיבית יותר.
מעבר לעולמות הבידור והסטרימינג, Lucy 2 מיועד גם לתחום הרובוטיקה. המודל משמש ככלי סימולציה והעשרת נתונים, ומאפשר לייצר אלפי תרחישים שונים מתוך הדגמה אחת בלבד.
באופן זה ניתן לאמן רובוטים להתמודד עם שינויים בתאורה ומול חומרים וסביבות שונים – ולשפר את יכולת ההסתגלות שלהם לעולם האמיתי.
זמינות
המודל זמין כבר כעת להתנסות באתר החברה.
