דְמוּי אָדָםלמשתמשים תהיה בקרוב גישה לצורה מהפכנית של שליטה במכשיר: לחלוטיןניווט ללא ידיים, תוך שימוש בכוח שלבינה מלאכותית של גוגלומעקב פנים.

חלק מרשימת העדכונים וההכרזות הארוכה של החברה המתפרסמת באירוע המרכזי למפתחים שלה היום, התכונה החדשה היא גרסה ניידת של היצע הדסקטופ של גוגל הידוע בשם Project Gameface. הסמן הווירטואלי החדש משתמש בשירותי נגישות אנדרואיד ומאגר מידע של הבעות פנים מממשק API לזיהוי נקודות ציון פנים של MediaPipeכדי לאפשר התאמה אישית ומניפולציה רחבה יותר של טכנולוגיית דיבורית הן למשתמשים והן למפתחים.

"דרך מצלמת המכשיר, הוא עוקב בצורה חלקה אחר הבעות פנים ותנועות ראש, ומתרגם אותם לשליטה אינטואיטיבית ומותאמת אישית. מפתחים יכולים כעת לבנות אפליקציות שבהן המשתמשים שלהם יכולים להגדיר את החוויה שלהם על ידי התאמה אישית של הבעות פנים, גדלי מחוות, מהירות הסמן ועוד". גוגל הסבירה בהודעתה.

Google שיתפה פעולה עם קבוצת פתרונות הנגישות הבינלאומיתלִכלוֹללבחון את הרחבת Gameface בהקשרים רחבים יותר, שאינם משחקים, כולל עבודה ומשימות חברתיות.

Project Gameface ראשוןהושק בשנת 2023כעכבר משחקים בקוד פתוח ללא ידיים המאפשר למשתמשים להפעיל סמני מחשב עם תנועות ראש ופנים בלבד. הטכנולוגיה תוכננה בשיתוף פעולה עם סטרימר משחקי וידאו ויראלילאנס קאר, שהוא quadriplegic, כאופציה נגישה יותר למערכות יקרות לעקיבה ראשים. זה גם הציג את האפשרות של גודל מחוות, המאפשר התאמה אישית רבה יותר עבור משתמשים בניידות שונה.

"שמחנו לראות חברות כמויכולת משחקהשתמש באבני בניין של Project Gameface, כמוMediaPipe Blendshapes, בתוכנה הכוללת שלהם", כתבה גוגל. "כעת, אנחנו פותחים קוד נוסף עבור Project Gameface כדי לעזור למפתחים לבנות אפליקציות אנדרואיד כדי להפוך כל מכשיר אנדרואיד לנגיש יותר".

גוגל גם הכריזה על תכונות AI חדשות עבור טכנולוגיית קוראי המסך שלה,TalkBack, שיספק תיאורים מפורטים יותר וימלא מידע עבורתמונות ללא תוויתבאינטרנט כדי לעזור למשתמשים עיוורים או בעלי ראייה לקויה.

Project Gameface הואזמין כעת למפתחיםב-GitHub.