OpenAIחשפה את GPT-4o, דגם AI חדש המשלב טקסט, חזון ואודיו.

בשעה שלואירוע שידור חי המצופה מאוד, CTO של OpenAI Mira Murati שיתפה ש-GPT-4o יכול לעבד טקסט, אודיו וחזון בדגם אחד. GPT-4o יהיה זמין בחינם לכל משתמשי ChatGPT. הוא זמין גם ב-API, והוא חצי מהמחיר ומהיר פי שניים מ-GPT -4 Turbo. ה-"o" בשם מייצג "אומני", ומתייחס לשיטות המשולבות שלו במודל אחד.

יכולות קול GPT-4o

ההודעה אישרהשמועות קודמות על עוזר קולי. בעבר, היו מודלים נפרדים עבור אופני קול ותמונה. אבל GPT-4o הוא "מולטי-מודאלי מטבעו",אמרמנכ"ל OpenAI, סם אלטמן ב-X.

ייתכן שהציוץ נמחק

כעת, ה-GPT-4o מפגיש את האופנים, מקטין את השהיה והופך אותו למגיב בזמן אמת. זה אומר שאתה יכול להפריע למודל. הוא גם יכול לחוש רגשות וטונים ולהביע את הרגשות והצלילים שלו, מה שגורם לו להישמע דרמטי או רובוטי ביותר. זה אפילו יכול לשיר (אם תרצה בכך).

הקול הנשי המרגיע בשימוש בהדגמה גם נשמע מאוד כמו דמות העוזרת הקולית של סקרלט ג'והנסון בסרטשֶׁלָה.

יכולות ראייה GPT-4o

הדגמה נוספת הציגה את היכולת של GPT-4o לעזור בבעיות מתמטיקה באמצעות שיטת הראייה שלו. זה יכול להדריך את המשתמש דרך בעיה מתמטית בסיסית בעת פתרון עבור X. על ידי הדגשת קוד על המסך, ChaGPT עם GPT-4o יכול לעבד ולהבין מהו הקוד ולעזור לשפר אותו.

מתוך פניות משתמשים, ChatGPT עם GPT-4o הראה את יכולתו לתרגם בזמן אמת ולהבין רגשות.

ייתכן שהציוץ נמחק

מוראטי התחיל את האירוע על ידי שיתוף הזמינות של אפליקציית שולחן עבודה חדשה.

בעבר, השמועה הייתה ש-OpenAI מכריזה על מנוע חיפוש ChatGPT או שנאי חדש מדגם GPT-5 לפניGoogle I/O. המנכ"ל, סם אלטמן, הפיל את השמועות הללו לפני האירוע ביום שני, אך מאמינים שהן עדיין בפיתוח.