اے آئی ٹریننگ سے انکار: اوپن اے آئی، گوگل، مائیکروسافٹ اور اینتھروپک ایک robots.txt اصول پر متفق
ویب سائٹ کی robots.txt فائل کی ایک لائن جلد چار بڑی اے آئی کمپنیوں کو آپ کے مواد پر ماڈل ٹرین کرنے سے روک دے گی۔ یہ کیسے کام کرتا ہے اور کب شروع ہوگا۔
دنیا کی چار بڑی اے آئی کمپنیوں اوپن اے آئی، گوگل، مائیکروسافٹ اور اینتھروپک نے جمعہ 30 اکتوبر کو کہا ہے کہ وہ سب robots.txt کے ایک ہی اصول کی پابندی کریں گی، جو انہیں بتائے گا کہ کسی ویب سائٹ کے صفحات اے آئی ماڈلز کی ٹریننگ میں استعمال نہ کیے جائیں۔ اب تک جو ویب سائٹ مالک اس سے بچنا چاہتا تھا اسے ہر کمپنی کا کرالر الگ الگ نام سے بلاک کرنا پڑتا تھا، اور نئے کرالرز پر بھی نظر رکھنی پڑتی تھی۔
نئے ٹوکن کا نام __usage_ai-training ہے۔ ویب سائٹ اسے اپنی robots.txt فائل میں شامل کرے تو چاروں کمپنیوں نے وعدہ کیا ہے کہ وہ اسے ٹریننگ سے انکار سمجھیں گی۔
یہ کیسے کام کرتا ہے؟
robots.txt ایک سادہ ٹیکسٹ فائل ہے جو ہر ویب سائٹ /robots.txt پر رکھ سکتی ہے تاکہ کرالرز کو بتایا جائے کہ وہ کہاں جا سکتے ہیں۔ نیا اصول یوں لکھا جاتا ہے:
User-agent: __usage_ai-training
Disallow: /اس سے پوری سائٹ پر ٹریننگ بند ہو جاتی ہے۔ چاہیں تو صرف کچھ حصے بلاک کیے جا سکتے ہیں، یا Allow لائن لگا کر کچھ حصے کھلے رکھے جا سکتے ہیں۔
یہ تجویز انٹرنیٹ کے بہت سے معیار طے کرنے والے ادارے آئی ای ٹی ایف کو اینتھروپک کے کیون کیلی نے ایک انفرادی مسودے کی صورت میں دی ہے۔ اسے ابھی باضابطہ معیار کا درجہ حاصل نہیں؛ فی الحال یہ اس لیے کام کرے گا کہ چاروں کمپنیوں نے اس پر عمل کا اعلان کیا ہے۔
یہ کب شروع ہوگا؟
سب کی ٹائم لائن الگ ہے:
- اینتھروپک کے مطابق اس نے عمل درآمد شروع کر دیا ہے۔
- اوپن اے آئی آنے والے مہینوں میں اسے لاگو کرے گی۔
- مائیکروسافٹ نے تاریخ دی ہے: یکم فروری 2027۔
- گوگل 2027 کے شروع میں۔ گوگل کا کہنا ہے کہ جہاں سائٹ نیا ٹوکن استعمال کرے گی، اسے ایسے سمجھا جائے گا جیسے سائٹ نے گوگل کا موجودہ ٹریننگ کنٹرول Google-Extended بلاک کر دیا ہو۔
یہ کیا نہیں کرتا
یہاں غلط فہمی ہو سکتی ہے۔
- یہ صرف ٹریننگ کے بارے میں ہے، سائٹ پر آنے کے بارے میں نہیں۔ کرالرز سرچ کے لیے یا کسی صارف کے سوال کا جواب دینے کے لیے صفحات اب بھی پڑھ سکتے ہیں۔ مائیکروسافٹ نے اس “گراؤنڈنگ” کو الگ سیٹنگ رکھا ہے جس کا اپنا کنٹرول ہوگا۔
- یہ کچھ ڈیلیٹ نہیں کرتا۔ جو مواد پہلے ہی ڈیٹا سیٹس یا تیار ماڈلز میں جا چکا، وہ وہیں رہے گا۔
- یہ درخواست ہے، تالا نہیں۔ یہ صرف سائٹ مالک کی مرضی بتاتا ہے۔ پبلشر اور اے آئی کمپنی کے درمیان لائسنس معاہدہ اس سے بالاتر ہو سکتا ہے، اور جن کمپنیوں نے یہ وعدہ نہیں کیا وہ اس کی پابند نہیں۔
- پرانے طریقے برقرار ہیں۔ GPTBot یا Google-Extended جیسے کرالرز کو نام سے بلاک کرنا اب بھی کام کرے گا۔
پاکستان کے لیے اس کا مطلب
پاکستانی نیوز ویب سائٹس، بلاگرز اور بیرون ملک کلائنٹس کے لیے ویب سائٹس بنانے والے فری لانسرز کے لیے یہ ایک الجھا ہوا کام ایک لائن میں بدل دیتا ہے۔ لاہور یا کراچی کا ورڈپریس ڈویلپر جس سے کلائنٹ پوچھے کہ “کیا ہم اے آئی کو اپنا مواد استعمال کرنے سے روک سکتے ہیں؟”، اس کے پاس جلد ایک سادہ اور معیاری جواب ہوگا، اور اسے ابھی سے کلائنٹ چیک لسٹ میں شامل کرنا فائدہ مند ہے۔
ہمارے تجزیے کے مطابق ٹریننگ بلاک کرنے سے سائٹ کی عام گوگل رینکنگ متاثر ہونے کا امکان کم ہے کیونکہ سرچ کرالنگ الگ چلتی ہے، لیکن کچھ بدلنے سے پہلے ہر کمپنی کی ہدایات دیکھ لیں، کیونکہ اے آئی جوابات اور خلاصوں کے اصول ابھی بن رہے ہیں۔
اگلی اہم تاریخ یکم فروری 2027 ہے، جب مائیکروسافٹ کے مطابق اس کی سپورٹ شروع ہوگی، اور گوگل کی بھی اسی کے آس پاس توقع ہے۔
