Newsletter Subscribe
Enter your email address below and subscribe to our newsletter
[forminator_form id="25163"]

theverge.com.engadget.com.engadget.com.Τέσσερις από τους μεγαλύτερους προγραμματιστές τεχνητής νοημοσύνης θα αναγνωρίζουν πλέον ένα ενιαίο σήμα στο αρχείο robots.txt, επιτρέποντας στους ιδιοκτήτες ιστοσελίδων να αρνούνται τη χρήση του περιεχομένου τους για την εκπαίδευση μοντέλων παραγωγικής τεχνητής νοημοσύνης. Οι εκδότες δεν θα χρειάζεται πλέον να μπλοκάρουν το crawler κάθε εταιρείας ξεχωριστά. Οι Google Alphabet Inc. , OpenAI, Anthropic και Microsoft δεσμεύτηκαν την Παρασκευή, 30 Οκτωβρίου, να υποστηρίξουν ένα κοινό "policy token" που προτάθηκε στην Internet Engineering Task Force, όπως ανέφερε το The Verge, επικαλούμενο προγενέστερο ρεπορτάζ του Search Engine Roundtable.theverge.com
Οι εταιρείες θα ενεργοποιήσουν τη λειτουργία σε διαφορετικές χρονικές στιγμές. Η Anthropic έχει ήδη ξεκινήσει να υποστηρίζει την οδηγία, η Microsoft θα ξεκινήσει την 1η Φεβρουαρίου 2027, η Google σχεδιάζει να ακολουθήσει στις αρχές του 2027 και η OpenAI υποσχέθηκε να την εφαρμόσει τους επόμενους μήνες, σύμφωνα με το Engadget.engadget.com
Η πρόταση προέρχεται από τον Kevin Kelley, τεχνικό υπεύθυνο της Anthropic για τα πρότυπα. Οι ιδιοκτήτες ιστοσελίδων προσθέτουν μια ομάδα στο robots.txt με το "__usage_ai-training" ως user agent, ακολουθούμενη από κανόνες Disallow, ενώ μπορούν να χρησιμοποιήσουν γραμμές Allow για να επιτρέψουν την εκπαίδευση σε συγκεκριμένους φακέλους, όπως ένα press kit. Το σήμα καλύπτει μόνο την εκπαίδευση. Δεν αποτελεί οδηγία για το crawling και δεν αλλάζει την ευρετηρίαση στις μηχανές αναζήτησης.engadget.com
Σε ανάρτηση στην ιστοσελίδα της OpenAI, η εταιρεία χαρακτήρισε την κίνηση "εθελοντική προσπάθεια" και δήλωσε ότι το νέο σήμα "δεν θα αντικαταστήσει τους ελέγχους που ήδη παρέχουμε μέσω του robots.txt". Ο John Mueller της Google δήλωσε ότι οι ιστοσελίδες θα μπορούν να χρησιμοποιούν ένα κοινό σήμα "για να ορίζουν γενικές προτιμήσεις σε όλους τους συμμετέχοντες παρόχους AI". Πρόσθεσε ότι αν μια ιστοσελίδα εξαιρεθεί μέσω του σήματος χωρίς να κατονομάζει το Google-Extended, η Google θα το αντιμετωπίζει ως αποκλεισμό του Google-Extended, σύμφωνα με το Search Engine Land.openai.com+1
Η Microsoft προχώρησε ένα βήμα παραπέρα από τις άλλες τρεις εταιρείες. Το Bing θα προσφέρει ξεχωριστές ρυθμίσεις για την εκπαίδευση AI και το AI grounding, το οποίο αφορά τη χρήση σελίδων για τη δημιουργία απαντήσεων από την τεχνητή νοημοσύνη. Μια επιλογή "Limited Grounding" θα επιτρέπει στις ιστοσελίδες να υποστηρίζουν τα δικά της προϊόντα AI της Microsoft, αρνούμενες παράλληλα τις υπηρεσίες grounding τρίτων. Η Microsoft έθεσε επίσης ένα χρονοδιάγραμμα που εκτείνεται από προσωρινούς ελέγχους στις 15 Δεκεμβρίου 2026 έως την προθεσμία της 1ης Μαρτίου 2027 για ιστοσελίδες που χρησιμοποιούν ακόμη παλαιότερες ετικέτες NoArchive ή NoCache. Σύμφωνα με το blog του Bing, καμία από αυτές τις επιλογές δεν επηρεάζει την κατάταξη στα κανονικά αποτελέσματα αναζήτησης.seroundtable.com+1
Η οδηγία δεν μπορεί να αναιρέσει τη συλλογή δεδομένων που έχει ήδη πραγματοποιηθεί, καθώς το περιεχόμενο που έχει ήδη συγκεντρωθεί παραμένει στα χέρια των εταιρειών. Επίσης, δεν εμποδίζει τα crawlers από το να επισκέπτονται σελίδες, ενώ η συμμόρφωση παραμένει εθελοντική. Η Meta δήλωσε ότι υποστηρίζει την ιδέα, αλλά δεν έχει δεσμευτεί για την εφαρμογή της. Το ίδιο το προσχέδιο παραμένει μια πρόταση υπό επεξεργασία από την ομάδα εργασίας AI Preferences του IETF και όχι ένα ολοκληρωμένο πρότυπο.zglg.work+3