חוקרי אנבידיה (nvidia) ואוניברסיטת מרילנד הציגו את QUEEN (ר"ת QUantized Efficient ENcoding), מודל בינה מלאכותית חדש המיועד להזרמת וידאו מנקודת מבט חופשית FVV (ר"ת Free-Viewpoint Video) עם שמירה על איכות וידאו גבוהה והורדת גודל כל פריים חדש לכ-0.7MB בלבד.
לצד פתרונות הסטרימינג המוכרים לרובנו כמו וידאו ואודיו, קיימים לא מעט שירותים המזרימים וידאו תלת-מימדי המאפשר למשתמש לשנות את נקודת המבט שלו בוידאו, פיצ'ר שימושי לסרטוני ספורט, המאפשרים לאוהדים לחוות את המשחק מכל זווית, או סרטוני בישול המאפשרים נקודת מבט טובה יותר על המבשל והמרכיבים.
מודל ה-QUEEN החדש משתמש בטכניקת 3D-GS (ר"ת 3D Gaussian Splatting) על מנת ללמוד את ה"שאריות הגאוסיות" בין שני פריימים עוקבים בזמן אמת בתוך פחות מ-5 שניות וללא הגבלה או שינוי של הפריימים עצמם, דבר המאפשר שחזור תמונה באיכות גבוהה ויציבה ולצמצם את רוחב הפס הדרוש לוידאו לרמה של 0.7MB לפריים עם יכולת רנדור של כ~350 פריימים בשניה.
החיסכון ושיפור האיכות שמגיעים עם מודל QUEEN החדש נראים היטב בסרטוני ההשוואה הזמינים בפרסום של אנבידיה, כאשר בין הדמאוים ניתן לראות את רוחב הפס של אחד מסרטונים יורד מ-8.89MB/s עם מודל 3DGStream ל-1.26MB/s עם Queen תוך שיפור איכות הוידאו עצמו.
שליני דה מלו, מדענית מחקר בכירה ב-NVIDIA, מסבירה:
על מנת להזרים וידאו מנקודת מבט חופשית כמעט בזמן אמת, אנחנו חייבים לשחזר ולדחוס את סצנת התלת-ממד במקביל, QUEEN מאזן בין הפקטורים השונים שכוללים קצב דחיסה, איכות ויזואלית, זמן קידוד וזמן רינדור על מנת ליצור תהליך עבודה אופטימלי שמציב סטנדרט חדש של איכות ויזואלית ויכולת הזרמה.
עוקבים? כל החדשות מגאדג'טי
חלק מהפוסטים באתר כוללים קישורי תכניות שותפים, עבורם נקבל עמלה עם ביצוע רכישה בפועל של מוצרים. עמלה זו לא מייקרת את העלות הסופית של המוצרים עבורכם.
הסקירות והתכנים המופיעים באתר מהווים המלצה בלבד, וכך יש להתייחס אליהם. כל המחירים המופיעים באתר נכונים ליום הפרסום בלבד והאחריות לקניית מוצר או שירות כזה או אחר מוטלת עליך בלבד – השימוש באתר בהתאם לתנאי השימוש והפרטיות.