Το OpenAI ανακοίνωσε την Πέμπτη ότι θα τιμήσει ένα κοινό σήμα στο robots.txt, τα αρχεία που χρησιμοποιούν οι ιστότοποι για να επικοινωνούν με τον τρόπο πρόσβασης στο περιεχόμενό τους, έτσι ώστε οι χειριστές του ιστότοπου να μπορούν να εκφράσουν μια ενιαία προτίμηση εκπαίδευσης AI σε πολλούς παρόχους ταυτόχρονα αντί να διατηρούν ξεχωριστούς κανόνες για κάθε πρόγραμμα ανίχνευσης. Η Google και η Microsoft υποστηρίζουν επίσης την προσπάθεια, σύμφωνα με αναφορές του The Verge, με το Search Engine Roundtable να τεκμηριώνει ανακοινώσεις υιοθεσίας και από τις δύο εταιρείες την ίδια ημέρα.
Η κίνηση αντιμετωπίζει ένα μακροχρόνιο σημείο πόνου για τους εκδότες. Μέχρι τώρα, ένας ιστότοπος που ήθελε να κρατήσει το περιεχόμενό του εκτός των αγωγών εκπαίδευσης τεχνητής νοημοσύνης έπρεπε να προσδιορίζει κάθε πρόγραμμα ανίχνευσης τεχνητής νοημοσύνης ξεχωριστά και να γράφει ξεχωριστούς κανόνες για κάθε πάροχο και στη συνέχεια να διατηρεί αυτήν τη λίστα ενημερωμένη καθώς εμφανίζονταν νέοι ανιχνευτές. Ένα κοινό σήμα καταρρέει αυτό το βάρος συντήρησης σε μια γραμμή προθέσεων, την οποία οι συμμετέχουσες εταιρείες συμφωνούν να σέβονται. For more context on this story, see our ongoing breaking AI news.
Σε τι δεσμεύτηκε το OpenAI
Στην ανακοίνωσή του, το OpenAI περιέγραψε την προσπάθεια ως εθελοντική και είπε ότι στοχεύει να εφαρμόσει το σήμα τους επόμενους μήνες, ενώ οι λεπτομέρειες εφαρμογής θα ακολουθήσουν σε μεταγενέστερη ενημέρωση, σύμφωνα με τον λογαριασμό της Unite.AI για την ανακοίνωση. Η εταιρεία είπε ότι το νέο σήμα δεν θα αντικαταστήσει τα στοιχεία ελέγχου που παρέχει ήδη μέσω του robots.txt, τα οποία θα συνεχίσουν να ισχύουν και να γίνονται σεβαστά.
Το OpenAI πλαισίωσε την εργασία ως βάση των συνεχιζόμενων προσπαθειών της ομάδας εργασίας AI Preferences του Internet Engineering Task Force, της προσπάθειας του σώματος προτύπων που εργάζεται για να καθορίσει πώς οι ιστότοποι μπορούν να εκφράσουν αναγνώσιμες από μηχανή προτιμήσεις σχετικά με τον τρόπο χρήσης του περιεχομένου τους σε συστήματα AI. Η εταιρεία είπε ότι συμμετέχει σε άλλους συμμετέχοντες της ομάδας εργασίας στην ανακοίνωση και ενθάρρυνε και άλλους παρόχους τεχνητής νοημοσύνης να τιμήσουν το σήμα επίσης.
Σύνδεση Google και Microsoft
Η σημασία της ανακοίνωσης εξαρτάται σε μεγάλο βαθμό από το ποιος άλλος υιοθετεί το πρότυπο και τα πρώτα σημάδια δείχνουν ότι συμμετέχουν οι μεγαλύτεροι παίκτες. Η Search Engine Roundtable ανέφερε την Πέμπτη ότι η Google υιοθέτησε το νέο έλεγχο εκπαίδευσης AI και κάλυψε χωριστά το Bing της Microsoft που ανακοινώνει νέα συστήματα ελέγχου τεχνητής νοημοσύνης που συνδέονται με τα προϊόντα γείωσης της αναζήτησης AI. Το Verge ανέφερε ότι το OpenAI, η Google και η Microsoft υποστηρίζουν το νέο πρότυπο για ιστοτόπους, γεγονός που θα το καταστήσει την πρώτη διβιομηχανική σύμβαση του είδους της που υποστηρίζεται από τις εταιρείες των οποίων οι ανιχνευτές αντιπροσωπεύουν το μεγαλύτερο μέρος της ανάκτησης που σχετίζεται με την τεχνητή νοημοσύνη.
Εάν οι τρεις εταιρείες ακολουθήσουν, ένας χειριστής ιστοτόπου θα μπορεί να ορίσει ταυτόχρονα μια ενιαία εξαίρεση εκπαίδευσης που γίνεται κατανοητή από τους ανιχνευτές πίσω από το ChatGPT, τα προϊόντα τεχνητής νοημοσύνης της Google και το οικοσύστημα Copilot της Microsoft ταυτόχρονα. Αυτός είναι ένας ουσιαστικά απλούστερος κόσμος για τους εκδότες από τον σημερινό, όπου κάθε πάροχος τεκμηριώνει τα δικά του ονόματα ανιχνευτών και διακριτικά προτιμήσεων.
Γιατί οι εκδότες ήθελαν αυτό
Η ώθηση για ένα ενοποιημένο σήμα έχει αναπτυχθεί εδώ και χρόνια, καθώς η εκπαίδευση AI έγινε σημείο ανάφλεξης μεταξύ της βιομηχανίας τεχνολογίας και των ανθρώπων που παράγουν το γραπτό αρχείο από το οποίο μαθαίνουν τα μοντέλα. Οι ειδησεογραφικοί οργανισμοί, ειδικότερα, έχουν παραπονεθεί ότι οι ανιχνευτές τεχνητής νοημοσύνης διαγράφουν τα ρεπορτάζ τους σε κλίμακα ενώ τα επιχειρηματικά τους μοντέλα που χρηματοδοτούνται από διαφημίσεις διαβρώνονται και αρκετοί εκδότες έχουν προσφύγει στα δικαστήρια ή έχουν υπογράψει συμφωνίες αδειοδότησης για να ανακτήσουν τη μόχλευση.
Οι ενδιάμεσες λύσεις έχουν πολλαπλασιαστεί. Το Cloudflare, το οποίο βρίσκεται μπροστά από ένα μεγάλο τμήμα του ιστού, κυκλοφόρησε μια ρύθμιση που επιτρέπει στους ιστότοπους να αποκλείουν προγράμματα ανίχνευσης εκπαίδευσης με τεχνητή νοημοσύνη χωρίς να χάνουν την ορατότητα της αναζήτησης Google, μια διάκριση που έχει σημασία επειδή η ανίχνευση τεχνητής νοημοσύνης και η ευρετηρίαση αναζήτησης διέπονταν ιστορικά από τους ίδιους κανόνες robots.txt. Τα πρότυπα που λειτουργούν εντός της ομάδας εργασίας AI Preferences του IETF έχει στόχο να επισημοποιήσει την έκφραση προτιμήσεων σε επίπεδο πρωτοκόλλου.
Ένα κοινό σήμα που υιοθετείται από τους μεγάλους παρόχους τεχνητής νοημοσύνης θα ήταν το πιο συνεπές βήμα μέχρι τώρα, επειδή λειτουργεί μέσω του υπάρχοντος μηχανισμού robots.txt που οι χειριστές του ιστότοπου γνωρίζουν ήδη πώς να χρησιμοποιούν.
Η ερώτηση επιβολής
Το πρότυπο είναι εθελοντικό και αυτή η λέξη έχει βάρος. Μια προτίμηση robots.txt δεν έχει ισχύ νόμου από μόνη της. δεσμεύει μόνο τις εταιρείες που συμφωνούν να το τηρήσουν και η συμμόρφωση ιστορικά εξαρτιόταν από τον εντοπισμό και την επιβολή του δικού του παρόχου. Η δήλωση του OpenAI ότι οι υπάρχοντες έλεγχοι robots.txt θα συνεχίσουν να γίνονται σεβαστοί υποδηλώνει συνέχεια και όχι νέο καθεστώς και η εταιρεία δεν έχει ακόμη δημοσιεύσει τις τεχνικές λεπτομέρειες για τον τρόπο εφαρμογής ή ελέγχου της συμμόρφωσης.
Υπάρχουν επίσης ανοιχτά ερωτήματα που η ανακοίνωση δεν διευθετείται. Μένει να δούμε αν το σήμα καλύπτει μόνο την εκπαίδευση ή επεκτείνεται στην ανάκτηση και τη γείωση, τις διαδικασίες με τις οποίες τα συστήματα τεχνητής νοημοσύνης λαμβάνουν ζωντανό περιεχόμενο ιστού για να απαντήσουν σε ερωτήσεις. Η διάκριση έχει σημασία για τους εκδότες, επειδή τα προϊόντα που βασίζονται σε ανάκτηση μπορούν να οδηγήσουν την επισκεψιμότητα πίσω στις πηγές, ενώ η χρήση εκπαίδευσης όχι. Ο τρόπος με τον οποίο οι εμπειρίες τεχνητής νοημοσύνης που διαχειρίζονται οι μηχανές αναζήτησης αντιμετωπίζουν το σήμα σε σχέση με τους γενικούς κανόνες ανίχνευσης θα διαμορφώσει εάν οι εκδότες βλέπουν την υιοθέτηση ως νίκη ή ως φύλλο συκής.
Τι να παρακολουθήσετε
Τα επόμενα ορόσημα είναι συγκεκριμένα: η ενημέρωση εφαρμογής του OpenAI, οι τεχνικές προδιαγραφές που δημοσιεύουν οι συμμετέχουσες εταιρείες και εάν άλλοι σημαντικοί πάροχοι τεχνητής νοημοσύνης — συμπεριλαμβανομένων των μεγάλων κινεζικών εργαστηρίων και των ανεξάρτητων εταιρειών συμπερασμάτων — ανακοινώνουν υποστήριξη. Οι εκδότες και οι κάτοχοι δικαιωμάτων θα παρακολουθούν με μεγαλύτερη προσοχή την ιστορία του ελέγχου, δηλαδή εάν οι φορείς εκμετάλλευσης μπορούν να επαληθεύσουν ότι η προτίμησή τους γίνεται πραγματικά σεβαστή σε κλίμακα.
Εάν ισχύει το πρότυπο, η ανακοίνωση της Πέμπτης μπορεί να μείνει στη μνήμη ως τη στιγμή που οι εξαιρέσεις εκπαίδευσης τεχνητής νοημοσύνης σταμάτησαν να αποτελούν συνονθύλευμα ανά εταιρεία και έγιναν μια σύμβαση σε όλο τον ιστό. Εάν σταματήσει, εντάσσεται σε μια μακρά σειρά εθελοντικών προτύπων ιστού που η βιομηχανία χειροκρότησε και στη συνέχεια αγνόησε σιωπηλά.
---
Stay Ahead of AIGet the latest AI news, analysis, and breakthroughs — all in one place.
Read more AI news →
