30 października 2026 r. OpenAI, Google i Microsoft zapowiedziały wspólny sygnał w pliku robots.txt, który pozwoli wydawcom wyrazić preferencję dotyczącą trenowania modeli AI na ich treściach. Token __usage_ai-training nie zatrzymuje jednak pobierania stron przez roboty i sam nie zapewnia, że każdy dostawca zastosuje się do tej preferencji. OpenAI, Google i Microsoft zapowiedziały różne terminy wdrożenia. AFP podała 31 października, że Anthropic dołączył do inicjatywy i rozpoczął prace nad jej wdrożeniem.

Jak działa token __usage_ai-training

Projekt IETF proponuje umieścić token w osobnej grupie User-Agent w pliku robots.txt. Zwykłe reguły Allow i Disallow określają w niej ścieżki, których preferencja dotyczy. Przykładowa reguła dla całej witryny wygląda tak:

User-Agent: __usage_ai-training
Disallow: /

W projekcie „trenowanie” oznacza wykorzystanie treści do zmiany parametrów wyuczonych modelu generatywnej sztucznej inteligencji. Zadania, które nie służą generowaniu, nie mieszczą się w tej definicji. Wydawca może też określić wyjątki dla wybranych ścieżek za pomocą reguł Allow. Projekt internetowy IETF opisuje tę składnię jako propozycję, a nie przyjęty standard.

Sama grupa User-Agent: * nie zastępuje grupy z tokenem. Jeśli token nie występuje w pliku, witryna nie wyraża za pomocą tego mechanizmu preferencji dotyczącej trenowania.

Dlaczego sygnał nie blokuje pobierania stron

__usage_ai-training opisuje preferencję dotyczącą użycia treści, a nie dostęp robotów do witryny. Wydawca, który chce ograniczyć pobieranie stron, musi ustawić osobne reguły dla robotów. Konsument, który nie wdroży tokena, może zignorować jego grupę, a projekt dopuszcza, by prywatne umowy miały pierwszeństwo przed wyrażoną w ten sposób preferencją. To sygnał dla wdrażających go usług, nie techniczny mechanizm egzekwowania ani sposób na usunięcie treści z modeli już wytrenowanych.

OpenAI zapowiadało wdrożenie w najbliższych miesiącach, Google planuje obsługę sygnału w 2027 r., a Microsoft ma respektować nowe preferencje podczas crawlowania od 1 lutego 2027 r. W przypadku witryn korzystających z NoArchive lub NoCache Microsoft wyznaczył 1 marca 2027 r. jako termin przejścia na nowe ustawienia. Witryny ograniczające grounding mogą użyć tymczasowego ustawienia, by utrzymać ograniczenie do czasu ponownego pobrania strony; wygasa ono najpóźniej 30 września 2027 r. albo wcześniej, gdy Microsoft ponownie pobierze stronę i odczyta nowe ustawienie. Microsoft opisuje również warunki tej zmiany.

Trenowanie i grounding to osobne ustawienia

Grounding to wykorzystanie strony jako źródła informacji przy tworzeniu odpowiedzi AI. Microsoft rozdziela preferencje dotyczące trenowania i groundingu: trenowanie można określić w robots.txt lub na poziomie strony, natomiast grounding ustawia się dla konkretnej strony. Gdy żadna preferencja nie ma zastosowania, Microsoft domyślnie przyjmuje zgodę na oba sposoby użycia. Ograniczenie groundingu może zmniejszyć widoczność strony w usługach AI Microsoftu, ale nie zmienia jej kwalifikacji do tradycyjnych wyników Bing.

Google planuje traktować wspólną rezygnację z trenowania jako zakaz dla Google-Extended, chyba że witryna określi ten token osobno. Z kolei jawne zezwolenie na Google-Extended może umożliwić grounding w Gemini Apps. Ustawienia dostawcy mogą więc decydować o wykorzystaniu strony w odpowiedziach AI niezależnie od jej obecności w zwykłych wynikach wyszukiwania. Google wyjaśnia planowane mapowanie sygnału.