Google DeepMind חשפה את SL2T, דגם בינה מלאכותית שנועד לתרגם את שפת הסימנים לטקסט, והושק לראשונה במערך הסמארטפונים החדש של החברה Pixel 11. המודל, שהוצג תחת הכותרת "הכנסת בינה מלאכותית של שפת הסימנים לידי המשתמשים", מסמן את אחד הניסיונות הבולטים ביותר עד כה להביא הבנת שפת הסימנים בזמן אמת למכשיר צרכני מיינסטרים.

ההכרזה הגיעה לצד אירוע השקת Pixel 11 של גוגל, בו הציגה החברה חבילה של תכונות חדשות המופעלות על ידי תאומים. ביניהם, תרגום שפת הסימנים בלט כאבן דרך ברורה לנגישות, שהפכה את המצלמה הקדמית של הטלפון לגשר בין משתמשים חירשים לאנשים שאינם יודעים שפת סימנים.

שפת סימנים לטקסט, במכשיר

לפי DeepMind ודיווחים של Engadget ו-Android Authority, SL2T יכול לתמלל את שפת הסימנים לטקסט ישירות במכשירי Pixel 11. התכונה מופיעה לראשונה ב-Pixel 11 Pro Fold, טלפון הדגל המתקפל של גוגל, שהחברה מיקמה כחלון ראווה ליכולת החדשה.

Digital Trends תיאר את המהדורה כ"דרך חדשה עבור משתמשים חירשים לתקשר עם אנשים שאינם יודעים שפת סימנים", תוך מסגור SL2T ככלי מעשי לשיחה יומיומית ולא כהדגמה ניסיוני גרידא. הרעיון פשוט אך רב עוצמה: משתמש חירש חותם לטלפון שלו, הדוגמנית מפרשת את המחוות, והטקסט המתקבל מוצג לשותף שיחה שומע לקרוא.

הפעלת הדגם במכשיר, במקום משלוח וידאו לענן, נושאת השלכות משמעותיות הן על הפרטיות והן על האמינות. שיחות בשפת הסימנים הן אינטימיות ולעתים קרובות מכילות מידע רגיש, והימנעות מסיבוב ענן שומר את הנתונים האלה בטלפון. זה גם מאפשר לתכונה לעבוד במצבים שבהם הקישוריות גרועה.

מדוע שפת הסימנים היא בעיית בינה מלאכותית קשה

שפת הסימנים מורכבת הרבה יותר מזיהוי צורות ידיים בלבד. שפות סימנים מלאות, כמו שפת הסימנים האמריקאית (ASL), משתמשות בתנועות ידיים, הבעות פנים, תנוחת גוף ותנועה במרחב כדי להעביר משמעות, ויש להן דקדוק משלהן נבדל משפות מדוברות. דגם שעוקב רק אחר ידיים יחמיץ הרבה ממה שחתם אומר.

זו הסיבה שתרגום לשפת הסימנים פיגר מאחורי זיהוי דיבור. בניית מערכת שיכולה לפרש את מלוא העושר של תקשורת חתומה בזמן אמת, בטלפון, בתקציבי כוח וזיכרון מצומצמים, מייצגת אתגר הנדסי אמיתי. DeepMind עדיין לא פרסמה פרטים טכניים מלאים על הארכיטקטורה או ביצועי הבנצ'מרק של SL2T, והחברה הדגישה את החוויה מול המשתמש על פני מדדים גולמיים בהכרזה שלה.

ראוי לציין את הפירוט הציבורי המצומצם. אימות בלתי תלוי של שיעורי דיוק, שפות סימנים נתמכות והשהייה יקבעו אם SL2T הוא כלי יומי אמין או תכונה בשלב מוקדם שעדיין זקוקה להבשלה. לעת עתה, האישור על פני ההכרזה של DeepMind עצמה ופרסומי הטכנולוגיה המרובים מאשרים שהדגם קיים ומועבר על חומרה לצרכן.

נגישות כשדה קרב בינה מלאכותית

SL2T מגיע כאשר תכונות הנגישות הפכו לזירה גלויה יותר ויותר של תחרות בין מעבדות בינה מלאכותית ויצרניות מכשירים. כתוביות בזמן אמת, תיאורי תמונות למשתמשים עיוורים ועכשיו תרגום לשפת הסימנים ממוקמים לא כתוספות נישה אלא כיכולות כותרות המדגימות את הערך המעשי של AI במכשיר.

עבור גוגל, קשירת SL2T להשקת Pixel 11 משרתת שתי מטרות. זה נותן לחומרה החדשה תכונה ייחודית שחסרה לטלפונים של המתחרים, וזה מחזק את המסר שג'מיני, עוזרת הבינה המלאכותית של גוגל, נשזרת במערכת ההפעלה ברמה בסיסית. ה-Pixel 11 Pro Fold, עם המסך הפנימי הגדול יותר שלו, הוא בית ראשון טבעי לתכונה שנועדה להיות מוצגת לשותף שיחה מעבר לשולחן.

הדרך קדימה עבור AI בשפת הסימנים

השאלה הגדולה יותר עבור קהילת החירשים וכבדי השמיעה היא האם SL2T מתרחב מעבר למכשיר בודד ולסט מוגבל של שפות סימנים. שפת הסימנים האמריקאית היא ככל הנראה מוקד ההשקה, אבל יש מאות שפות סימנים ברחבי העולם, כל אחת עם מבנה משלה וריאציה אזורית. דגם שעובד יפה עבור חותמי ASL בארצות הברית עשוי להועיל מעט למשתמש בשפת הסימנים הבריטית, Auslan או LSF.

ל-DeepMind יש רקורד של התחלה צרה והגדלה, כפי שעשתה עם מערכות כמו AlphaFold ודגמי מזג האוויר שלה. אם SL2T עוקב אחר הדפוס הזה, הופעת הבכורה של Pixel 11 היא מהלך פתיחה ולא מוצר מוגמר. משוב קהילתי ממשתמשים חרשים, שנמצאים במיקום הטוב ביותר לשפוט אם התרגומים מדויקים וטבעיים, יעצבו את מה שיבוא אחר כך.

לעת עתה, הגעתו של תרגום לשפת הסימנים בטלפון בשוק ההמוני הוא צעד בולט. זה מצביע על כך שהפער ארוך השנים בין היכולת של AI להבין שפת דיבור ליכולתה להבין שפת סימנים עשוי סוף סוף להתחיל להיסגר, מכשיר אחד בכל פעם.

התעדכן עם מהדורות הדגמים האחרונות והתפתחויות בינה מלאכותית בסיקור החדשותי של AI Buzz Wire.

הישאר לפני AI

משפת הסימנים ועד אינטליגנציה על - עקבו אחר כל השקת דגם ב-AI Buzz Wire קרא עוד חדשות AI →