OpenAI wil een gezamenlijk signaal in robots.txt gaan respecteren waarmee websitebeheerders hun voorkeur over AI-training aangeven. Het bedrijf kondigde dat op 30 oktober aan en verwacht de invoering in de komende maanden. Voor uitgevers betekent de toezegging dus nog geen onmiddellijke verandering in de verwerking van hun inhoud.
| Wat je moet weten |
|---|
| OpenAI wil een gedeeld signaal voor voorkeuren over generatieve AI-training ondersteunen. |
| De invoering wordt voor de komende maanden voorzien; een exacte datum ontbreekt. |
| De gekoppelde ontwerptekst maakt onderscheid tussen gebruik voor training en toegang door crawlers. |
| Bestaande OpenAI-regels voor crawlers blijven volgens het bedrijf gelden. |
Met het gedeelde signaal moeten beheerders dezelfde voorkeur aan meerdere deelnemende aanbieders kunnen doorgeven. Nu vergt dat volgens de aankondiging van OpenAI afzonderlijke regels per aanbieder. Het bedrijf zegt later meer over de uitvoering bekend te maken.
Een voorkeur is nog geen toegangsblokkade
De gekoppelde ontwerptekst bij de IETF beschrijft een aparte aanduiding in robots.txt: __usage_ai-training. Dat document is een Internet-Draft, een werkdocument. De aankondiging van ondersteuning maakt het voorstel op zichzelf niet tot een vastgestelde standaard.
Het voorbeeld in het document wijst training voor de hele website af, maar maakt een uitzondering voor de map /press-kit/. Een beheerder kan zo verschillende voorkeuren per onderdeel vastleggen. De tekst introduceert daarvoor geen nieuwe regelnamen of grammatica: de bestaande groepsindeling en padregels van robots.txt blijven in gebruik.
De wens om bepaald gebruik te beperken, staat in het voorstel los van de vraag of een crawler een pagina mag ophalen. De tekst zegt uitdrukkelijk dat het trainingssignaal geen instructie voor het crawlgedrag is.
Daarmee vervangt deze voorkeur geen regels voor een specifieke crawler. Ook bevat het voorstel een voorbehoud: afzonderlijke afspraken kunnen boven de aangegeven voorkeur gaan. Voor een websitebeheerder blijven zulke afspraken en de betreffende crawlregels dus relevant. OpenAI zegt zijn bestaande controles via robots.txt te blijven respecteren.
Marktcontext, gecontroleerd op 31 oktober om 09:10 uur Nederlandse tijd: de laatst verhandelde prijzen in de Kraken-europaren waren ā¬69.259,30 voor bitcoin en ā¬2.008,74 voor ether. Dit is een momentopname; de geraadpleegde bronnen onderbouwen geen koersreactie op de aankondiging.






