OpenAI đã công bố vào thứ Năm rằng họ sẽ tôn trọng tín hiệu được chia sẻ trong robots.txt, tệp mà các trang web sử dụng để truyền đạt cách truy cập nội dung của họ, để các nhà điều hành trang web có thể thể hiện một tùy chọn đào tạo AI duy nhất cho nhiều nhà cung cấp cùng một lúc thay vì duy trì các quy tắc riêng cho mỗi trình thu thập thông tin. Google và Microsoft cũng đang hỗ trợ nỗ lực này, theo báo cáo của The Verge, với Hội nghị bàn tròn của Công cụ Tìm kiếm ghi lại các thông báo áp dụng từ cả hai công ty trong cùng một ngày.
Động thái này giải quyết một điểm khó khăn lâu nay đối với các nhà xuất bản. Cho đến thời điểm hiện tại, một trang web muốn giữ nội dung của mình nằm ngoài quy trình đào tạo AI phải xác định riêng từng trình thu thập dữ liệu AI và viết các quy tắc riêng cho từng nhà cung cấp, sau đó cập nhật danh sách đó khi trình thu thập thông tin mới xuất hiện. Tín hiệu được chia sẻ sẽ thu gọn gánh nặng bảo trì đó thành một mục đích mà các công ty tham gia đồng ý tôn trọng. For more context on this story, see our ongoing artificial intelligence updates.
Những gì OpenAI cam kết
Trong thông báo của mình, OpenAI mô tả nỗ lực này là tự nguyện và cho biết họ nhằm mục đích triển khai tín hiệu trong những tháng tới, với các chi tiết triển khai sẽ có trong bản cập nhật sau, theo tài khoản thông báo của Unite.AI. Công ty cho biết tín hiệu mới sẽ không thay thế các điều khiển mà nó đã cung cấp thông qua robots.txt, tín hiệu này sẽ tiếp tục được áp dụng và được tôn trọng.
OpenAI đóng khung công việc dựa trên những nỗ lực không ngừng của nhóm làm việc Tùy chọn AI của Lực lượng Đặc nhiệm Kỹ thuật Internet, nỗ lực của cơ quan tiêu chuẩn đang nỗ lực xác định cách các trang web có thể thể hiện các tùy chọn có thể đọc được bằng máy về cách sử dụng nội dung của chúng trong hệ thống AI. Công ty cho biết họ đang cùng với những người tham gia nhóm làm việc khác đưa ra thông báo và khuyến khích các nhà cung cấp AI khác cũng tôn trọng tín hiệu này.
Đăng nhập Google và Microsoft
Tầm quan trọng của thông báo này phụ thuộc rất nhiều vào việc ai khác áp dụng tiêu chuẩn này và những dấu hiệu ban đầu cho thấy những người chơi lớn nhất đang tham gia. Hội nghị bàn tròn của Công cụ Tìm kiếm đã báo cáo hôm thứ Năm rằng Google đã áp dụng biện pháp kiểm soát đào tạo AI mới và đưa tin riêng về việc Bing của Microsoft công bố các biện pháp kiểm soát đào tạo AI mới được kết nối với các sản phẩm nền tảng tìm kiếm AI của họ. The Verge báo cáo rằng OpenAI, Google và Microsoft đang hỗ trợ tiêu chuẩn mới cho các trang web, điều này sẽ biến nó thành quy ước xuyên ngành đầu tiên thuộc loại này được hỗ trợ bởi các công ty có trình thu thập thông tin chiếm phần lớn việc tìm nạp liên quan đến AI.
Nếu ba công ty làm theo, nhà điều hành trang web sẽ có thể thiết lập một lựa chọn không tham gia đào tạo duy nhất được các trình thu thập thông tin đằng sau ChatGPT, các sản phẩm AI của Google và hệ sinh thái Copilot của Microsoft hiểu được cùng một lúc. Đó là một thế giới đơn giản hơn về mặt vật chất đối với các nhà xuất bản so với thế giới hiện tại, nơi mỗi nhà cung cấp ghi lại tên trình thu thập thông tin và mã thông báo tùy chọn của riêng mình.
Tại sao nhà xuất bản muốn điều này
Việc thúc đẩy một tín hiệu thống nhất đã được xây dựng trong nhiều năm khi việc đào tạo AI trở thành điểm nóng giữa ngành công nghệ và những người tạo ra bản ghi mà các mô hình học hỏi. Đặc biệt, các tổ chức tin tức đã phàn nàn rằng trình thu thập dữ liệu AI thu thập dữ liệu báo cáo của họ trên quy mô lớn trong khi các mô hình kinh doanh được tài trợ bởi quảng cáo của họ bị xói mòn và một số nhà xuất bản đã ra tòa hoặc ký các thỏa thuận cấp phép để đòi lại đòn bẩy.
Các giải pháp tạm thời đã được phổ biến rộng rãi. Cloudflare, chiếm phần lớn trang web, đã đưa ra cài đặt cho phép các trang web chặn trình thu thập thông tin đào tạo AI mà không làm mất khả năng hiển thị tìm kiếm của Google, một điểm khác biệt quan trọng vì việc thu thập thông tin và lập chỉ mục tìm kiếm của AI trước đây bị chi phối bởi cùng các quy tắc robots.txt. Các tiêu chuẩn hoạt động trong nhóm làm việc Tùy chọn AI của IETF nhằm mục đích chính thức hóa biểu thức ưu tiên ở cấp độ giao thức.
Tín hiệu chia sẻ được các nhà cung cấp AI lớn áp dụng sẽ là bước quan trọng nhất vì nó hoạt động thông qua cơ chế robots.txt hiện có mà các nhà điều hành trang web đã biết cách sử dụng.
Câu hỏi thực thi
Tiêu chuẩn là tự nguyện, và lời nói đó có trọng lượng. Bản thân tùy chọn robots.txt không có hiệu lực pháp luật; nó chỉ ràng buộc những công ty đồng ý tôn trọng nó và việc tuân thủ trước đây phụ thuộc vào sự phát hiện và thực thi của chính mỗi nhà cung cấp. Tuyên bố của OpenAI rằng các biện pháp kiểm soát robots.txt hiện tại của họ sẽ tiếp tục được tôn trọng, gợi ý về tính liên tục thay vì một chế độ mới và công ty vẫn chưa công bố chi tiết kỹ thuật về cách thực hiện hoặc kiểm tra việc tuân thủ.
Ngoài ra còn có những câu hỏi mở mà thông báo không giải quyết được. Vẫn còn phải xem liệu tín hiệu chỉ bao gồm đào tạo hay mở rộng sang truy xuất và tiếp đất, các quá trình mà hệ thống AI tìm nạp nội dung web trực tiếp để trả lời các câu hỏi. Sự khác biệt quan trọng đối với các nhà xuất bản vì các sản phẩm dựa trên truy xuất có thể hướng lưu lượng truy cập trở lại nguồn, trong khi việc sử dụng đào tạo thì không. Cách trải nghiệm AI do công cụ tìm kiếm quản lý xử lý tín hiệu so với các quy tắc thu thập dữ liệu chung của chúng sẽ định hình việc các nhà xuất bản coi việc áp dụng là một chiến thắng hay một lá sung.
Xem gì
Các cột mốc quan trọng tiếp theo là cụ thể: Bản cập nhật triển khai OpenAI, thông số kỹ thuật mà các công ty tham gia công bố và liệu các nhà cung cấp AI quan trọng khác – bao gồm các phòng thí nghiệm lớn của Trung Quốc và các công ty suy luận độc lập – có công bố hỗ trợ hay không. Các nhà xuất bản và chủ sở hữu bản quyền sẽ theo dõi chặt chẽ nhất câu chuyện kiểm toán, tức là liệu các nhà khai thác có thể xác minh rằng ưu tiên của họ thực sự được tôn trọng trên quy mô lớn hay không.
Nếu tiêu chuẩn được giữ vững, thông báo hôm thứ Năm có thể được ghi nhớ là thời điểm việc từ chối đào tạo AI không còn là sự chắp vá của mỗi công ty và trở thành một quy ước trên toàn web. Nếu nó bị đình trệ, nó sẽ tham gia vào một hàng dài các tiêu chuẩn web tự nguyện mà ngành công nghiệp hoan nghênh và sau đó lặng lẽ bỏ qua.
---
Stay Ahead of AIGet the latest AI news, analysis, and breakthroughs — all in one place.
Read more AI news →
