Disponível para todos os parceiros publishers da TollBit—títulos como Penske Media Corporation e TIME—o Content Cache se baseia na infraestrutura existente dos publishers e redireciona os crawlers de IA para o subdomínio dedicado da TollBit, onde os bots de IA devem licenciar conteúdos via micropagamentos.
“O subdomínio da TollBit atuou como a porta da frente para os bots de IA,” explicou Panigrahi. “Se eles entrarem por aquele link, poderão licenciar e pagar por aquele artigo através de micropagamentos.”
A TollBit está oferecendo o Content Cache a seus parceiros publishers gratuitamente para até 3 milhões de acessos de bots por mês por site. A empresa não respondeu diretamente a perguntas sobre como cobrará os publishers no futuro.
Alguns dos parceiros publishers da TollBit já vinham solicitando uma ferramenta como esta, de acordo com Olivia Joslin, cofundadora da TollBit.
“O tráfego de bots de IA na web está explodindo, pressionando os sites dos publishers e aumentando os custos,” disse Joslin. “O valor da raspagem de IA ainda é incerto. Se os publishers não estiverem prontos para bloquear bots de forma direta, isso pelo menos lhes dá uma forma de compensar os custos.”