O Patreon começou a bloquear ativamente crawlers usados para treinamento de IA, substituindo pedidos voluntários por controles técnicos da Cloudflare.
- O Patreon começou a bloquear ativamente crawlers usados para treinamento de IA, substituindo pedidos voluntários por controles técnicos da Cloudflare.
- A mudança reforça a separação entre indexar conteúdo para descoberta e copiá-lo para treinar modelos. Também sinaliza que o robots.txt, sozinho, não oferece controle suficiente quando o crawler decide ignorar a preferência do site.
- Acompanhar se outras plataformas de criadores adotarão bloqueio semelhante e como mecanismos híbridos, que indexam e treinam, serão classificados.
O que aconteceu
A empresa afirmou que testes com o AI Crawl Control reduziram de milhares para zero as tentativas semanais de determinados robôs de treinamento. Bots voltados à indexação e descoberta, capazes de enviar tráfego de volta ao Patreon, continuarão permitidos.
Por que isso importa
A mudança reforça a separação entre indexar conteúdo para descoberta e copiá-lo para treinar modelos. Também sinaliza que o robots.txt, sozinho, não oferece controle suficiente quando o crawler decide ignorar a preferência do site.
O que acompanhar agora
Acompanhar se outras plataformas de criadores adotarão bloqueio semelhante e como mecanismos híbridos, que indexam e treinam, serão classificados.
Perguntas frequentes
O Patreon bloqueará todos os robôs?
Não. A restrição mira crawlers de treinamento; bots de indexação que ajudam usuários a encontrar páginas poderão continuar.
Por que o robots.txt não foi suficiente?
Segundo o Patreon, alguns crawlers ignoravam as orientações e continuavam acessando o conteúdo.