מיקרוסופט (Microsoft) מרחיבה את Phi, משפחת מודלי השפה הקטנים SLMs (ר"ת small language models) בקוד פתוח של החברה, עם הצגת מודל Phi-4-Mini הזעיר והמודל המולטי-מודאלי Phi-4-multimodal, המסוגל לעבד בו זמנית תוכן ויזואלי, דיבור וטקסט.
צמד המודלים החדש מצטרף למודל Phi-4 הראשי אותו הציגה מיקרוסופט בחודש דצמבר האחרון, מודל בגודל של 14 מיליארד פרמטרים, לעומת גודל של 5.6 ו-3.8 מיליארד פרמטרים לגרסאות ה-multimodal ו-mini, בהתאמה.
מודל ה-Phi-4-multimodal
הפיצ'ר המרכזי במודל ה-Phi-4-multimodal החדש הוא יכולות ההיגיון והיכולות המולטי-מודאליות שלו, המגיעות באמצעות שימוש בעיצוב mixture-of-LoRAs, המאפשר לו לעבד סוגי מידע שונים בו זמנית עם יכולת להבין טקסט ב-22 שפות שונות (בהן עברית), תוכן ויזואלי באנגלית ושמע ב-8 שפות נוספות (אך לא בעברית).
בהתחשב כי מדובר על מודל SLM זעיר בגודל 5.6 מיליארד פרמטרים, המודל החדש מציג ביצועים משופרים במבחני ביצועים ויזואליים עם ביצועים דומים ואף טובים יותר ממודלי ה- Gemini-2-Flash-lite של גוגל ו-Claude-3.5-Sonnet של אנתרופיק, אך נופל בביצועים בהשוואה ל-Gemini-2.0-Flash ו-GPT-4o של OpenAI.
בין הדוגמאות אותן הציגה מיקרוסופט ניתן לראות שיחה בין המודל החדש ומשתמש, בה הוא עונה על שאלות, מספק מידע וממליץ על תוכניות נסיעה בהתבסס על אילוסטרציה של "מחט החלל" הנמצאת בסיאטל בארה"ב, אותה המשתמש הציג למודל כחלק משיחה מתפתחת ביניהם.
מודל ה-Phi-4-mini הזעיר
בניגוד למודל ה-Phi-4 הרגיל בעל 14 מיליארד הפרמטרים, ה-Phi-4-mini המיועד לשימוש טקסטואלי מגיע בגודל של 3.8 מיליארד פרמטרים בלבד, המאפשרים לו לעבוד בצורה טובה יותר באופן מקומי.
מבחינת ביצועים, Phi-4-mini מציג ביצועים טובים יותר ממודלים זעירים מקבילים ואף גדולים יותר דוגמת Llama-3.2-3B, Minstral-8B, Gemma-2-9B, כאשר רק מודל ה-GPT-4o-mini של OpenAI מציג יתרון קבוע עליו.
משפחת מודלי ה-Phi-4 זמינה באתר Hugging Face, Azure AI Foundry ו-NVIDIA API Catalog.
עוקבים? כל החדשות מגאדג'טי
חלק מהפוסטים באתר כוללים קישורי תכניות שותפים, עבורם נקבל עמלה עם ביצוע רכישה בפועל של מוצרים. עמלה זו לא מייקרת את העלות הסופית של המוצרים עבורכם.
הסקירות והתכנים המופיעים באתר מהווים המלצה בלבד, וכך יש להתייחס אליהם. כל המחירים המופיעים באתר נכונים ליום הפרסום בלבד והאחריות לקניית מוצר או שירות כזה או אחר מוטלת עליך בלבד – השימוש באתר בהתאם לתנאי השימוש והפרטיות.