מצב הקול המתקדם של ChatGPT כולל כעת יכולות וידאו ושיתוף מסך.

הפיצ'ר היה במאי האחרון עם שחרורו שלGPT-4o, אבל רק שיטת האודיו הייתה בשידור חי. כעת משתמשים יכולים לשוחח בצ'אט עם ChatGPT באמצעות מצלמת טלפון והדגם "יראה" את מה שאתה רואה.

בזרם החי, CPO Kevin Weil וחברי צוות OpenAI אחרים הציגו את ChatGPT וסייעו בהכנת קפה למזיגה. על ידי הפניית המצלמה לעבר הפעולה, AVM הוכיחה שהיא מבינה את העיקרון של מכונת הקפה והובילה את הצוות בהכנת המשקה שלהם. הצוות גם הראה כיצד ChatGPT תומך בשיתוף מסך על ידי הבנת הודעה פתוחה בטלפון עם וייל עונד זקן סנטה.

ההכרזה המיוחלת מגיעה יום אחרי גוגלנחשףהדור הבא של דגם הדגל שלו, Gemini 2.0. ה-Gemini 2.0 החדש יכול גם לעבד קלט חזותי ואודיו ויש לו יותר יכולות סוכן, כלומר הוא יכול לבצע משימות מרובות שלבים בשם המשתמש. תכונות הסוכן של Gemini 2.0 קיימות כיום כאב טיפוס מחקר תחת שלושה שמות שונים: Project Astra עבור עוזר AI אוניברסלי, Project Mariner עבור משימות AI ספציפיות ו-Project Jules עבור מפתחים.

שלא להתעלם מכך, ההדגמה של OpenAI הראתה כיצד שיטת הראייה של ChatGPT זיהתה במדויק אובייקטים - ואף הייתה ניתנת להפסקה. וכן, חלק מזה כלל אפשרות קול סנטה במצב קולי, עם קול עמוק ועליז והרבה "הו-הו-הוס". אתה יכול לשוחח עם הגרסה של OpenAI של סנטה על ידי הקשה על סמל פתית השלג ב-ChatGPT. עדיין אין מילה אם סנטה קלאוס האמיתי תרם את קולו לאימון בינה מלאכותית או ש-OpenAI השתמש בקולוללא הסכמה מוקדמת.

באופן מוזר, בעת בחירת קול סנטה באפליקציית ChatGPT, המשתמש מוזהר כי הקול מיועד רק לאנשים בני 13 ומעלה.

ייתכן שהציוץ נמחק

החל מהיום, וידאו ושיתוף מסך זמינים למשתמשי ChatGPT Plus ו-Pro, עם זמינות Enterprise ו-Edu בינואר.