Các nhà nghiên cứu tại Đại học Tel Aviv và Đại học Stanford báo cáo rằng hệ thống trí tuệ nhân tạo có thể phát triển các kỹ năng học tập thực sự thông qua tài liệu đào tạo được tạo ra hoàn toàn bởi các mô hình AI khác - không có văn bản, ảnh do con người viết hoặc bất kỳ dữ liệu bên ngoài nào khác liên quan.
Các phát hiện, được công bố trên nền tảng in sẵn khoa học arXiv và được The Media Line mô tả, cho thấy rằng một mô hình có thể xây dựng khả năng dự đoán cốt lõi của nó trước khi nó tiếp xúc với vật liệu trong thế giới thực – một kết quả có thể thay đổi cách đào tạo các hệ thống AI trong tương lai. Để biết thêm thông tin về nghiên cứu đột phá, hãy xem trang chủ của AI Buzz Wire.
Vòng lặp tự đào tạo hoạt động như thế nào
Nhóm đã thử nghiệm ý tưởng này bằng một hệ thống đào tạo được xây dựng từ hai mô hình AI. Một người được giao nhiệm vụ tạo ra các chuỗi ký hiệu; người còn lại cố gắng dự đoán biểu tượng nào sẽ xuất hiện tiếp theo. Cả mô hình đều không tham khảo tài liệu bằng văn bản, ảnh hoặc bất kỳ nguồn bên ngoài nào khác - mọi bài tập trong chương trình giảng dạy đều được tạo ra bên trong chính hệ thống.
Khi các bài tập tiến triển, máy phát điện ngày càng tinh vi hơn trong việc tạo ra các thử thách giúp cải thiện hiệu suất của đối tác, trong khi người dự đoán phát triển các khả năng mạnh mẽ hơn bằng cách liên tục cố gắng giải quyết những vấn đề đó. Cách tiếp cận này cho phép hệ thống AI cải thiện cách học một cách hiệu quả thông qua một vòng lặp liên tục tạo và giải các bài tập có độ khó tăng dần.
Kỹ năng không có kiến thức
Để xác định xem những kỹ năng đó có thể được áp dụng ngoài môi trường đào tạo nhân tạo hay không, các nhà nghiên cứu đã đánh giá mô hình kết quả dựa trên một số loại thông tin thực: ngôn ngữ viết, hình ảnh, âm thanh, âm nhạc, mã máy tính và trình tự DNA.
Các thí nghiệm đã chứng minh rằng độ chính xác trong dự đoán tiếp tục tăng lên khi các tài nguyên máy tính bổ sung được phân bổ cho quá trình đào tạo - bằng chứng cho thấy phương pháp này có thể mở rộng quy mô và có thể trở nên hiệu quả hơn khi năng lực tính toán mở rộng.
Các kết quả cũng vẽ ra một đường quan trọng. Các mô hình đã phát triển khả năng nhận dạng các mẫu, nhưng chúng không thu thập được thông tin thực tế một cách độc lập về các chủ đề trong thế giới thực; Các nhà nghiên cứu nhận thấy loại kiến thức đó vẫn đòi hỏi phải tiếp xúc với dữ liệu thực tế. Nói cách khác, chương trình đào tạo tự tạo có thể dạy một mô hình cách học chứ không phải những gì thế giới chứa đựng.
Tuy nhiên, các nhà nghiên cứu tin rằng kỹ thuật này có thể làm cho các hệ thống AI trong tương lai hoạt động hiệu quả hơn bằng cách tăng cường khả năng học tập cơ bản của chúng trước khi chúng bắt đầu xử lý thông tin trong thế giới thực – có khả năng giảm lượng yêu cầu đào tạo ở biên giới vật chất do con người tạo ra ở giai đoạn đầu của quy trình.
Tại sao 'Học để học' lại quan trọng
Có một sự tương tự hữu ích trong giáo dục con người: một học sinh đã thực hành giải các bài toán không quen thuộc thường rút ra được nhiều điều từ một cuốn sách giáo khoa cố định hơn là một học sinh chỉ học thuộc lòng nó. Những gì mà thiết lập Tel Aviv–Stanford thể hiện, trong bài đọc này, là một phiên bản máy móc của sự tách biệt đó - một giai đoạn trong đó một mô hình có được kỹ năng dự đoán chung từ các bài tập được tạo ra, trước khi bất kỳ kho ngữ liệu thực nào xuất hiện.
Phát hiện này cũng là một lời nhắc nhở rằng đào tạo trước và kiến thức không giống nhau, sự khác biệt ngày càng trở nên quan trọng hơn khi các phòng thí nghiệm trộn dữ liệu tổng hợp vào hệ thống của họ. Nếu một mô hình có thể đạt đến giai đoạn dữ liệu thực và đã biết cách loại bỏ tín hiệu ra khỏi chuỗi, thì kho dữ liệu tương tự có thể tiến xa hơn một cách hợp lý - mặc dù đó vẫn chỉ là một giả thuyết cho đến khi công việc trong tương lai kiểm tra nó.
Giống như bất kỳ bản in trước nào, kết quả đang chờ sự nhân rộng và xem xét kỹ lưỡng từ cộng đồng nghiên cứu rộng hơn và việc đánh giá bao gồm các nhiệm vụ dự đoán thay vì thế hệ kết thúc mở xác định các chatbot thương mại.
Một ngành công nghiệp đói dữ liệu cần lưu ý
Kết quả rơi vào giữa cuộc tranh luận tích cực về dữ liệu đào tạo. Kho văn bản con người chất lượng cao có thể truy cập đã được khai thác rất nhiều và các thỏa thuận cấp phép, dữ liệu tổng hợp và phương pháp tự phát đều được coi là cách để tiếp tục cải thiện các mô hình khi nguồn cung của web mở ngày càng ít. Chứng minh rằng các kỹ năng học tập hữu ích có thể xuất hiện từ các bài tập hoàn toàn do máy tạo ra sẽ bổ sung thêm một điểm dữ liệu cụ thể cho lập luận đó.
Lời cảnh báo riêng của các nhà nghiên cứu đánh dấu ranh giới của tuyên bố: kiến thức thế giới vẫn cần dữ liệu thực. Bằng chứng này, tự đào tạo là một cách giúp các mô hình học tập tốt hơn - không phải là cách để thay thế sự thật cơ bản đến từ thế giới thực.
Israel dựa vào AI
Thông báo này được đưa ra khi Israel đang nỗ lực củng cố vị thế của mình trong lĩnh vực trí tuệ nhân tạo. Vào ngày 3 tháng 11, Tổng thống Isaac Herzog đã triệu tập phiên khai mạc diễn đàn "Beyond Intelligence", được thành lập với Ban Giám đốc AI Quốc gia tại Văn phòng Thủ tướng và Viện Chính sách AI của Moses để xem xét tác động của AI đối với việc làm, an ninh kinh tế và xã hội.
Theo The Media Line, "Israel phải đi đầu về trí tuệ nhân tạo". "Chuyến tàu này sẽ không đợi chúng ta và cả thế giới đang nhìn về phía chúng ta."
Hiện tại, kết quả của Tel Aviv–Stanford nằm ngay trong cột nghiên cứu: một bản thảo đang chờ được xem xét kỹ lưỡng trong lĩnh vực này, mô tả một nguyên tắc đào tạo hơn là một sản phẩm. Nhưng nếu chương trình giảng dạy tự tạo có thể thay thế một cách có ý nghĩa cho một phần của đường dẫn dữ liệu, thì đầu vào gây tranh cãi nhất trong ngành - dữ liệu do con người tạo ra - có thể ít quan trọng hơn thứ khan hiếm nhất của nó: tính toán.
---
Đi trước AINhận tin tức, phân tích và đột phá mới nhất về AI — tất cả ở cùng một nơi.
Đọc thêm tin tức về AI →
