Cloudflare wprowadza nowe opcje zarządzania ruchem botów AI

Cloudflare wprowadził nowe opcje zarządzania ruchem AI, oferując użytkownikom większą kontrolę nad tym, jak boty sztucznej inteligencji wykorzystują ich treści. Rok po ogłoszeniu pierwszego „Dnia Niezależności Treści”, firma rozszerza swoje narzędzia blokowania botów AI o bardziej szczegółowe kategorie. Szczegóły nowych funkcjonalności zostały opisane w oficjalnym wpisie na blogu Cloudflare.

Kluczowe wnioski

• Cloudflare wprowadza nową taksonomię botów AI opartą na trzech kategoriach: Search (wyszukiwanie), Agent (działanie w imieniu użytkownika) i Training (trenowanie modeli).
• Od 15 września 2026 roku kategorie Training i Agent będą domyślnie blokowane na stronach z reklamami, podczas gdy Search pozostanie dozwolone.
• Nowe opcje zarządzania będą dostępne dla wszystkich użytkowników Cloudflare, włącznie z planem darmowym.
• Firma zachęca operatorów botów do rozdzielenia swoich crawlerów na osobne narzędzia dla każdego zastosowania, co zwiększy transparentność.
• Zmiana odpowiada na ewoluujące potrzeby właścicieli stron, którzy chcą większej kontroli nad wykorzystaniem swoich treści przez AI.

Ewolucja problemu AI i treści

Rok temu dyskusje wokół botów AI koncentrowały się głównie na blokowaniu trenowania modeli bez wynagrodzenia. Właściciele treści stali przed dylematem: albo pojawiają się w wynikach wyszukiwania i pozwalają AI trenować na swoich treściach, albo ryzykują utratę widoczności. To niesprawiedliwie faworyzowało dotychczasowych dostawców wyszukiwarek, jeśli używali tych samych botów zarówno do wyszukiwania, jak i trenowania.

Dziś AI może być częścią wszystkiego. Wyszukiwarka Google przeszła od sortowania wyników przez AI do pełnego silnika odpowiedzi, który udziela odpowiedzi bezpośrednio na stronie wyników. To kierunek, w którym zmierza całe „wyszukiwanie”.

Pragmatyczna taksonomia botów

Cloudflare wprowadza nową klasyfikację opartą na trzech kluczowych przypadkach użycia AI:

Search — każde zachowanie polegające na zbieraniu lub indeksowaniu treści w celu późniejszego odpowiadania na pytania. Kluczowe jest proaktywne budowanie bazy danych strony. Właściciele powinni oczekiwać ruchu referencyjnego lub innego sprawiedliwego wynagrodzenia.

Agent — zautomatyzowane zachowanie działające w czasie rzeczywistym w imieniu osoby, aby wykonać zadanie. Obejmuje to boty pobierające czat (np. ChatGPT-User) i agentów używających przeglądarki (np. Gemini lub Claude sterujące Chrome).

Training — crawler pobierający treści do trenowania lub dostrajania modelu. Dane są na stałe wchłaniane do podstawowej architektury AI w celu poprawy jej możliwości.

Nowe domyślne ustawienia

Od 15 września 2026 roku Cloudflare ustawi nowe domyślne ustawienia dla każdej z trzech klasyfikacji. Dla wszystkich nowych domen dołączających do Cloudflare kategorie Training i Agent będą domyślnie blokowane na stronach wyświetlających reklamy, podczas gdy Search pozostanie dozwolone.

Reklama jest sygnałem, że właściciel strony zamierzał, aby osoba tam trafiła i ją zobaczyła — coś monetyzowanego, co napędza biznes. Na takich stronach uwaga człowieka jest celem końcowym, dlatego firma blokuje boty, które mogą tę uwagę zakłócić.

Nowe opcje zarządzania ruchem AI reprezentują znaczący krok w kierunku bardziej zniuansowanego podejścia do kontroli nad treściami w erze sztucznej inteligencji, dając właścicielom stron większą elastyczność w decydowaniu o tym, jak ich treści są wykorzystywane przez różne systemy AI.