OpenAI نے جمعرات کو اعلان کیا کہ وہ robots.txt میں مشترکہ سگنل کا احترام کرے گا، فائل ویب سائٹس اس بات کو بتانے کے لیے استعمال کرتی ہیں کہ ان کے مواد تک کیسے رسائی حاصل کی جا سکتی ہے، تاکہ سائٹ آپریٹرز ہر کرالر کے لیے الگ الگ قواعد برقرار رکھنے کے بجائے ایک سے زیادہ فراہم کنندگان کو ایک ہی AI ٹریننگ کی ترجیح کا اظہار کر سکیں۔ دی ورج کی رپورٹنگ کے مطابق، گوگل اور مائیکروسافٹ بھی اس کوشش کی حمایت کر رہے ہیں، سرچ انجن گول میز کے ساتھ ایک ہی دن دونوں کمپنیوں کی جانب سے اپنانے کے اعلانات کی دستاویزی دستاویز بھی کی گئی ہے۔
یہ اقدام پبلشرز کے لیے ایک دیرینہ درد کی طرف اشارہ کرتا ہے۔ اب تک، ایک ویب سائٹ جو اپنے مواد کو AI ٹریننگ پائپ لائنز سے باہر رکھنا چاہتی تھی، اسے ہر AI کرالر کو انفرادی طور پر شناخت کرنا پڑتا تھا اور ہر فراہم کنندہ کے لیے الگ الگ قوانین لکھنے ہوتے تھے، پھر اس فہرست کو موجودہ رکھنے کے لیے نئے کرالرز کے سامنے آتے تھے۔ ایک مشترکہ سگنل اس دیکھ بھال کے بوجھ کو ارادے کی ایک لائن میں سمٹ دیتا ہے، جس کا احترام کرنے والی کمپنیاں متفق ہیں۔ For more context on this story, see our ongoing artificial intelligence updates.
اوپن اے آئی نے کس چیز کا عزم کیا۔
اپنے اعلان میں، OpenAI نے اس کوشش کو رضاکارانہ قرار دیا اور کہا کہ اس کا مقصد آنے والے مہینوں میں سگنل کو لاگو کرنا ہے، اس اعلان کے Unite.AI کے اکاؤنٹ کے مطابق، بعد میں اپ ڈیٹ میں عمل درآمد کی تفصیلات کے ساتھ۔ کمپنی نے کہا کہ نیا سگنل ان کنٹرولز کی جگہ نہیں لے گا جو وہ پہلے سے ہی robots.txt کے ذریعے فراہم کرتا ہے، جو لاگو ہوتے رہیں گے اور ان کا احترام کیا جائے گا۔
OpenAI نے اس کام کو انٹرنیٹ انجینئرنگ ٹاسک فورس کے AI ترجیحات کے ورکنگ گروپ کی جاری کوششوں کی ڈرائنگ کے طور پر تیار کیا، جو معیاری باڈی کی کوشش ہے جو اس بات کی وضاحت کرنے کے لیے کام کر رہی ہے کہ کس طرح ویب سائٹیں مشین کے ذریعے پڑھنے کے قابل ترجیحات کا اظہار کر سکتی ہیں کہ ان کے مواد کو AI سسٹمز میں کیسے استعمال کیا جاتا ہے۔ کمپنی نے کہا کہ وہ اعلان کرنے میں دوسرے ورکنگ گروپ کے شرکاء میں شامل ہو رہی ہے اور دوسرے AI فراہم کنندگان کو بھی سگنل کا احترام کرنے کی ترغیب دی ہے۔
گوگل اور مائیکروسافٹ سائن آن
اعلان کی اہمیت اس بات پر بہت زیادہ منحصر ہے کہ اور کون اس معیار کو اپناتا ہے، اور ابتدائی علامات یہ ہیں کہ سب سے بڑے کھلاڑی شامل ہیں۔ سرچ انجن راؤنڈ ٹیبل نے جمعرات کو اطلاع دی کہ گوگل نے نئے AI ٹریننگ کنٹرول کو اپنایا ہے، اور الگ سے مائیکروسافٹ کے Bing کا احاطہ کرتا ہے جس میں اس کے AI سرچ گراؤنڈنگ مصنوعات سے منسلک نئے AI ٹریننگ کنٹرولز کا اعلان کیا گیا ہے۔ دی ورج نے اطلاع دی ہے کہ اوپن اے آئی، گوگل اور مائیکروسافٹ ویب سائٹس کے لیے نئے معیار کی حمایت کر رہے ہیں، جو اسے اپنی نوعیت کا پہلا کراس انڈسٹری کنونشن بنائے گا جس کی حمایت ان کمپنیوں کے ذریعے کی جائے گی جن کے کرالر AI سے متعلقہ بازیافت کا بڑا حصہ ہیں۔
اگر تینوں کمپنیاں اس کی پیروی کرتی ہیں تو، ایک ویب سائٹ آپریٹر ایک ہی ٹریننگ آپٹ آؤٹ سیٹ کر سکے گا جسے ChatGPT، Google کے AI پروڈکٹس، اور Microsoft کے Copilot ایکو سسٹم کے پیچھے کرالرز بیک وقت سمجھتے ہیں۔ پبلشرز کے لیے موجودہ دنیا کے مقابلے یہ مادی طور پر آسان دنیا ہے، جہاں ہر فراہم کنندہ اپنے کرالر کے نام اور ترجیحی ٹوکنز کو دستاویز کرتا ہے۔
پبلشرز یہ کیوں چاہتے تھے۔
ایک متحد سگنل کے لیے زور برسوں سے تیار کیا جا رہا ہے کیونکہ AI ٹریننگ ٹیکنالوجی کی صنعت اور ماڈلز سے سیکھنے والا تحریری ریکارڈ تیار کرنے والے لوگوں کے درمیان ایک فلیش پوائنٹ بن گیا ہے۔ خبروں کی تنظیموں نے، خاص طور پر، شکایت کی ہے کہ AI کرالر اپنی رپورٹنگ کو بڑے پیمانے پر ختم کر دیتے ہیں جب کہ ان کے اشتہارات سے چلنے والے کاروباری ماڈلز خراب ہو جاتے ہیں، اور کئی پبلشرز نے عدالت میں جا چکے ہیں یا فائدہ اٹھانے کے لیے لائسنس کے سودوں پر دستخط کیے ہیں۔
عبوری حل پھیل چکے ہیں۔ Cloudflare، جو ویب کے ایک بڑے حصے کے سامنے بیٹھا ہے، نے ایک ایسی ترتیب شروع کی ہے جو سائٹس کو Google تلاش کی مرئیت کو کھونے کے بغیر AI ٹریننگ کرالر کو بلاک کرنے دیتی ہے، یہ ایک امتیاز جو اہمیت رکھتا ہے کیونکہ AI کرالنگ اور سرچ انڈیکسنگ تاریخی طور پر انہی robots.txt قوانین کے تحت چلتی تھی۔ IETF کے AI ترجیحات کے ورکنگ گروپ کے اندر کام کرنے والے معیارات کا مقصد پروٹوکول کی سطح پر ترجیحی اظہار کو باقاعدہ بنانا ہے۔
بڑے AI فراہم کنندگان کی طرف سے اپنایا گیا مشترکہ سگنل ابھی تک سب سے زیادہ نتیجہ خیز قدم ہو گا، کیونکہ یہ موجودہ robots.txt میکانزم کے ذریعے کام کرتا ہے جسے سائٹ آپریٹرز پہلے سے جانتے ہیں کہ کس طرح استعمال کرنا ہے۔
نفاذ کا سوال
معیار رضاکارانہ ہے، اور یہ لفظ وزن رکھتا ہے۔ ایک robots.txt ترجیح میں بذات خود قانون کی کوئی طاقت نہیں ہوتی۔ یہ صرف ان کمپنیوں کو پابند کرتا ہے جو اس کا احترام کرنے پر متفق ہیں، اور تعمیل تاریخی طور پر ہر فراہم کنندہ کے اپنے پتہ لگانے اور نافذ کرنے پر منحصر ہے۔ OpenAI کا یہ بیان کہ اس کے موجودہ robots.txt کنٹرولز کا احترام کیا جاتا رہے گا، ایک نئی حکومت کے بجائے تسلسل کی نشاندہی کرتا ہے، اور کمپنی نے ابھی تک تکنیکی تفصیلات شائع نہیں کی ہیں کہ تعمیل کو کس طرح لاگو کیا جائے گا یا آڈٹ کیا جائے گا۔
ایسے کھلے سوالات بھی ہیں جو اعلان سے طے نہیں ہوتے۔ یہ دیکھنا باقی ہے کہ آیا سگنل صرف تربیت کا احاطہ کرتا ہے، یا بازیافت اور گراؤنڈنگ تک پھیلا ہوا ہے، وہ عمل جس کے ذریعے AI سسٹمز سوالات کے جوابات کے لیے لائیو ویب مواد حاصل کرتے ہیں۔ یہ امتیاز پبلشرز کے لیے اہمیت رکھتا ہے کیونکہ بازیافت پر مبنی مصنوعات ٹریفک کو واپس ذرائع کی طرف لے جا سکتی ہیں، جبکہ تربیت کا استعمال ایسا نہیں کرتا ہے۔ سرچ انجن کے زیر انتظام اے آئی کے تجربات سگنل کے ساتھ ان کے عام رینگنے کے اصولوں کے مقابلے میں کس طرح سے یہ شکل اختیار کریں گے کہ آیا پبلشرز گود لینے کو جیت یا انجیر کے پتے کے طور پر دیکھتے ہیں۔
کیا دیکھنا ہے۔
اگلے سنگ میل ٹھوس ہیں: OpenAI کے نفاذ کی تازہ کاری، شرکت کرنے والی کمپنیاں شائع کردہ تکنیکی تفصیلات، اور آیا دیگر اہم AI فراہم کنندگان - بشمول بڑی چینی لیبز اور آزاد انفرنس کمپنیاں - حمایت کا اعلان کریں۔ ناشرین اور حقوق کے حاملین آڈٹ کی کہانی کے لیے سب سے زیادہ قریب سے دیکھ رہے ہوں گے، یعنی، کیا آپریٹرز اس بات کی تصدیق کر سکتے ہیں کہ ان کی ترجیح کا بڑے پیمانے پر احترام کیا جا رہا ہے۔
اگر معیار برقرار رہتا ہے تو، جمعرات کے اعلان کو اس لمحے کے طور پر یاد رکھا جا سکتا ہے جب AI ٹریننگ آپٹ آؤٹس نے فی کمپنی پیچ ورک ہونا بند کر دیا اور ایک ویب وائیڈ کنونشن بن گیا۔ اگر یہ رک جاتا ہے، تو یہ رضاکارانہ ویب معیارات کی ایک لمبی لائن میں شامل ہو جاتا ہے جسے صنعت نے سراہا اور پھر خاموشی سے نظر انداز کر دیا۔
---
Stay Ahead of AIGet the latest AI news, analysis, and breakthroughs — all in one place.
Read more AI news →
