OpenAI הודיעה ביום חמישי שהיא תכבד אות משותף ב-robots.txt, אתרי הקבצים משתמשים בהם כדי לתקשר כיצד ניתן לגשת לתוכן שלהם, כך שמפעילי אתרים יוכלו להביע העדפה יחידה לאימון AI למספר ספקים בו-זמנית במקום לשמור על כללים נפרדים לכל סורק. גוגל ומיקרוסופט גם תומכות במאמץ, על פי דיווח של The Verge, כאשר מנוע חיפוש עגול מתעד הודעות אימוץ משתי החברות באותו יום.
המהלך מתייחס לנקודת כאב ארוכת שנים עבור מפרסמים. עד כה, אתר שרצה להרחיק את התוכן שלו מצינורות אימון בינה מלאכותית נאלץ לזהות כל סורק בינה מלאכותית בנפרד ולכתוב כללים נפרדים עבור כל ספק, ולאחר מכן לשמור על הרשימה עדכנית כאשר סורקים חדשים הופיעו. אות משותף ממוטט את עומס התחזוקה לכדי קו כוונות אחד, שהחברות המשתתפות מסכימות לכבד. For more context on this story, see our ongoing breaking AI news.
למה OpenAI התחייבה
בהודעתה, OpenAI תיארה את המאמץ כהתנדבותי ואמרה כי היא שואפת ליישם את האות בחודשים הקרובים, כאשר פרטי היישום יבואו בעדכון מאוחר יותר, על פי הדיווח של Unite.AI על ההכרזה. החברה אמרה שהאות החדש לא יחליף את הבקרות שהיא כבר מספקת באמצעות robots.txt, שימשיך לחול ויכבד.
OpenAI הגדיר את העבודה כשהיא מתבססת על המאמצים המתמשכים של קבוצת העבודה העדפות בינה מלאכותית של צוות הנדסת האינטרנט של צוות הנדסת בינה מלאכותית, מאמץ גוף הסטנדרטים שפעל כדי להגדיר כיצד אתרים יכולים להביע העדפות קריאות במכונה לגבי אופן השימוש בתוכן שלהם במערכות בינה מלאכותית. החברה אמרה שהיא מצטרפת למשתתפים אחרים בקבוצת עבודה בפרסום ההכרזה ועודדה ספקי AI אחרים לכבד את האות גם כן.
Google ו-Microsoft Sign On
משמעות ההכרזה תלויה במידה רבה במי עוד יאמץ את התקן, והסימנים המוקדמים הם שהשחקנים הגדולים ביותר נמצאים. Search Engine Roundtable דיווחה ביום חמישי שגוגל אימצה את בקרת האימון החדשה של AI, וכיסתה בנפרד את Bing של מיקרוסופט שהכריזה על בקרות אימון חדשות של AI המחוברות למוצרי הארקה של AI החיפוש שלה. The Verge דיווח כי OpenAI, גוגל ומיקרוסופט תומכות בתקן החדש לאתרי אינטרנט, מה שיהפוך אותו לכנס חוצה תעשיות ראשון מסוגו הנתמך על ידי החברות שהסורקים שלהן אחראים על עיקר האחזורים הקשורים ל-AI.
אם שלוש החברות ימשיכו לפעול, מפעיל אתר יוכל להגדיר ביטול הסכמה לאימון יחיד המובן על ידי הסורקים מאחורי ChatGPT, מוצרי הבינה המלאכותית של גוגל והאקולוגית של מיקרוסופט Copilot בו זמנית. זהו עולם פשוט יותר מבחינה מהותית עבור מפרסמים מהעולם הנוכחי, שבו כל ספק מתעד את שמות הסורק שלו ואסימוני העדפות משלו.
למה בעלי אתרים רצו את זה
הדחיפה לאות מאוחד נבנית כבר שנים כאשר הכשרת בינה מלאכותית הפכה לנקודת הבזק בין תעשיית הטכנולוגיה לבין האנשים שמייצרים את הרשומה הכתובה שממנו לומדים הדגמים. ארגוני חדשות, במיוחד, התלוננו שסורקי בינה מלאכותית מגרדים את הדיווחים שלהם בקנה מידה, בעוד שהמודלים העסקיים שלהם במימון הפרסום נשחקים, וכמה מפרסמים פנו לבית המשפט או חתמו על עסקאות רישוי כדי להחזיר את המינוף.
פתרונות הביניים התרבו. Cloudflare, שיושבת מול חלק גדול מהאינטרנט, השיקה הגדרה המאפשרת לאתרים לחסום סורקי אימון בינה מלאכותית מבלי לאבד את הנראות של החיפוש בגוגל, הבחנה שחשובה מכיוון שסריקת בינה מלאכותית ואינדקס החיפוש נשלטו היסטורית על ידי אותם כללי robots.txt. התקנים פועלים בתוך קבוצת העבודה העדפות AI של ה- IETF נועדה למסד את ביטוי ההעדפות ברמת הפרוטוקול.
אות משותף שאומץ על ידי ספקי הבינה המלאכותית הגדולות יהיה הצעד המשמעותי ביותר עד כה, מכיוון שהוא פועל באמצעות מנגנון ה-robots.txt הקיים שבו מפעילי האתרים כבר יודעים להשתמש.
שאלת האכיפה
התקן הוא וולונטרי, ולמילה הזו יש משקל. להעדפת robots.txt אין תוקף של חוק בפני עצמה; הוא מחייב רק את החברות שמסכימות לכבד אותו, והעמידה בדרישות הייתה תלויה היסטורית באיתור ובאכיפה של כל ספק. ההצהרה של OpenAI כי בקרות ה-robots.txt הקיימות שלה ימשיכו להיות מכובדות מעידה על המשכיות ולא על משטר חדש, והחברה עדיין לא פרסמה את הפרטים הטכניים של האופן שבו תיושם או תיבדק ציות.
ישנן גם שאלות פתוחות שההכרזה אינה מיישבת. נותר לראות אם האות מכסה רק אימון, או מתרחב לאחזור והארקה, את התהליכים שבהם מערכות AI מביאות תוכן אינטרנט חי כדי לענות על שאלות. ההבחנה חשובה לבעלי אתרים מכיוון שמוצרים מבוססי אחזור יכולים להחזיר תנועה למקורות, בעוד שהשימוש בהדרכה לא עושה זאת. האופן שבו חוויות AI המנוהלות במנועי חיפוש מתייחסות לאות לעומת כללי הסריקה הכלליים שלהן יעצבו אם בעלי אתרים יראו באימוץ ניצחון או עלה תאנה.
במה לצפות
אבני הדרך הבאות הן קונקרטיות: עדכון ההטמעה של OpenAI, המפרט הטכני שהחברות המשתתפות מפרסמות, והאם ספקי AI משמעותיים אחרים - כולל המעבדות הסיניות הגדולות וחברות הסקה עצמאיות - מכריזות על תמיכה. מפרסמים ובעלי זכויות יעקבו מקרוב אחר סיפור הביקורת, כלומר האם מפעילים יכולים לוודא שהעדפתם אכן מכבדת בקנה מידה.
אם התקן מתקיים, ההכרזה של יום חמישי עשויה להיזכר ברגע שבו ביטולי הסכמה לאימון בינה מלאכותית הפסיקו להיות טלאי טלאים לכל חברה והפכו לוועידה ברחבי האינטרנט. אם זה נתקע, הוא מצטרף לשורה ארוכה של תקני אינטרנט וולונטאריים שהתעשייה מחאה כפיים ואז התעלמה בשקט.
---
Stay Ahead of AIGet the latest AI news, analysis, and breakthroughs — all in one place.
Read more AI news →
