חוקרים מאוניברסיטת תל אביב ואוניברסיטת סטנפורד מדווחים כי מערכות בינה מלאכותית יכולות לפתח מיומנויות למידה אמיתיות באמצעות חומר הדרכה שנוצר כולו על ידי מודלים אחרים של בינה מלאכותית - ללא טקסט שנכתב על ידי אדם, תמונות או כל מידע חיצוני אחר.
הממצאים, שפורסמו בפלטפורמת ה-preprint המדעית arXiv ומתוארים על ידי The Media Line, מצביעים על כך שמודל יכול לבנות את יכולות הניבוי הבסיסיות שלו לפני שהוא אי פעם נתקל בחומר אמיתי - תוצאה שיכולה לשנות את האופן שבו מערכות בינה מלאכותיות מאומנות בעתיד. לסיקור מחקר פורץ נוסף, ראה דף הבית של AI Buzz Wire.
כיצד פועלת לולאת האימון העצמי
הצוות בדק את הקונספט עם מערכת אימון שנבנתה משני דגמי AI. על אחד הוטל ליצור רצפים של סמלים; השני ניסה לחזות איזה סמל יופיע לאחר מכן. אף אחת מהדוגמניות לא פנתה למסמכים כתובים, בתמונות או בכל מקור חיצוני אחר - כל תרגיל בתוכנית הלימודים הופק בתוך המערכת עצמה.
ככל שהתרגילים התקדמו, המחולל נעשה יותר ויותר מתוחכם ביצירת אתגרים ששיפרו את הביצועים של בן זוגו, בעוד שהמנבא פיתח יכולות חזקות יותר על ידי ניסיון חוזר ונשנה לפתור את הבעיות הללו. הגישה מאפשרת למעשה למערכת בינה מלאכותית לחדד את האופן שבו היא לומדת באמצעות לולאה מתמשכת של ייצור ופתרון תרגילים בעלי קושי עולה.
מיומנויות ללא ידע
כדי לקבוע אם ניתן ליישם את המיומנויות הללו מעבר לסביבת האימון המלאכותי, החוקרים העריכו את המודל שהתקבל מול מספר סוגים של מידע אמיתי: שפה כתובה, תמונות, אודיו, מוזיקה, קוד מחשב ורצפי DNA.
הניסויים הוכיחו שדיוק הניבוי המשיך לגדול ככל שהוקצו משאבי מחשוב נוספים לאימון - עדות לכך שהשיטה מתרחבת, ויכולה להיות יעילה יותר ככל שהיכולת החישובית מתרחבת.
התוצאות גם מותירות קו חשוב. המודלים פיתחו את היכולת לזהות דפוסים, אך הם לא רכשו באופן עצמאי מידע עובדתי על נושאים בעולם האמיתי; סוג זה של ידע, מצאו החוקרים, עדיין דורש חשיפה לנתונים ממשיים. במילים אחרות, אימון שנוצר בעצמו יכול ללמד מודל איך ללמוד, אבל לא מה העולם מכיל.
החוקרים מאמינים שהטכניקה בכל זאת יכולה להפוך את מערכות הבינה המלאכותית העתידיות ליעילות יותר, על ידי חיזוק יכולות הלמידה הבסיסיות שלהן לפני שהן מתחילות לעבד מידע מהעולם האמיתי - פוטנציאלית להפחית את הכמות הדרושה לריצות אימון חומר שנוצר על ידי אדם בקדמת הצינור.
למה חשוב 'ללמוד ללמוד'
יש אנלוגיה שימושית מהחינוך האנושי: תלמיד שהתאמן בפתרון בעיות לא מוכרות, מוציא בדרך כלל יותר מספר לימוד קבוע מאשר תלמיד שרק שנן אותו. מה שמדגים מערך תל אביב-סטנפורד בקריאה זו הוא גרסת מכונה של ההפרדה ההיא - שלב בו דגם רוכש מיומנות חיזוי כללית מתרגילים מיוצרים, לפני שקורפוס אמיתי כלשהו נכנס לתמונה.
הממצא הוא גם תזכורת לכך שהכשרה מוקדמת וידע הם לא אותו דבר, הבחנה שהלכה וגדלה כאשר מעבדות מערבבות נתונים סינתטיים לתוך הצינורות שלהן. אם מודל יכול להגיע לשלב הנתונים האמיתיים כבר יודע איך לסחוט אותות מתוך רצפים, אותו קורפוס עשוי להמשיך הלאה - אם כי זו נשארת בגדר השערה עד שעבודה עתידית תבדוק אותו.
כמו בכל הדפסה מוקדמת, התוצאה ממתינה לשכפול ובדיקה של קהילת המחקר הרחבה יותר, וההערכה כיסתה משימות חיזוי ולא את הדור הפתוח שמגדיר צ'אטבוטים מסחריים.
תעשייה רעב לנתונים שמה לב
התוצאה נוחתת בעיצומו של ויכוח פעיל על נתוני אימון. המאגר הנגיש של טקסט אנושי באיכות גבוהה נכרה בכבדות, ועסקאות רישוי, נתונים סינתטיים ושיטות הפעלה עצמית הוצפו כולם כדרכים להמשיך ולשפר מודלים כאשר היצע האינטרנט הפתוח דל. הדגמה שמיומנויות למידה שימושיות יכולות לצמוח מתרגילים גרידא שנוצרו על ידי מכונה מוסיפה נקודת נתונים קונקרטית לטיעון הזה.
האזהרה של החוקרים עצמם מסמנת את גבול הטענה: ידע העולם עדיין דורש נתונים אמיתיים. אימון עצמי, על פי עדויות אלה, הוא דרך להפוך מודלים לטובים יותר בלמידה - לא דרך להחליף את האמת הבסיסית שמגיעה מהעולם האמיתי.
ישראל נשענת אל AI
ההודעה מגיעה בזמן שישראל פועלת לחיזוק מעמדה בתחום הבינה המלאכותית. ב-3 בנובמבר כינס הנשיא יצחק הרצוג את מושב הפתיחה של פורום "מעבר למודיעין", שהוקם עם מינהלת הבינה המלאכותית הלאומית במשרד ראש הממשלה ומכון פסיפס למדיניות בינה מלאכותית כדי לבחון את השפעת הבינה המלאכותית על התעסוקה, הביטחון הכלכלי והחברה.
"ישראל חייבת לתפוס את מקומה בחזית הבינה המלאכותית", דחק הרצוג במושב, על פי "קו המדיה". "הרכבת הזו לא תחכה לנו, וכל העולם מסתכל בדרכנו".
לעת עתה, תוצאת תל אביב-סטנפורד יושבת באופן ישיר בטור המחקר: הדפסה מוקדמת הממתינה לבדיקת התחום, המתארת עיקרון הכשרה ולא מוצר. אבל אם תכניות לימודים שנוצרו בעצמן יכולות להחליף בצורה משמעותית חלק מצינור הנתונים, הקלט השנוי במחלוקת ביותר בתעשייה - נתונים שנוצרו על ידי אדם - עשוי להיות חשוב במעט מהדל ביותר שלו: מחשוב.
---
הישאר לפני AIקבל את החדשות, הניתוחים ופריצות הדרך האחרונות של AI - הכל במקום אחד.
קרא עוד חדשות AI →
