A startup de inteligência artificial Anthropic, responsável pelos grandes modelos de linguagem Claude, está sendo acusada de ignorar o protocolo “do not crawl” do arquivo robots.txt para coletar dados de sites. O CEO da iFixit, Kyle Wiens, afirmou que a Anthropic desconsiderou a política do site que proíbe o uso de seu conteúdo para treinamento de modelos de IA. De acordo com Matt Barrie, CEO da Freelancer, o crawler da Anthropic foi o mais agressivo, resultando em 3,5 milhões de visitas em quatro horas, e causando impacto no desempenho do site e na receita. Além disso, a Anthropic também foi mencionada por ignorar o protocolo robots.txt em um caso anterior, juntamente com outras empresas de IA.
Ambas as empresas afetadas tiveram que bloquear o crawler da Anthropic para evitar prejuízos. A startup de IA alega respeitar o protocolo robots.txt e está investigando o caso para minimizar a interrupção causada por seus crawlers. As empresas de IA utilizam esses crawlers para coletar conteúdo de sites e treinar suas tecnologias de IA, mas têm enfrentado processos por violação de direitos autorais. Algumas empresas, como a OpenAI, têm buscado acordos com editoras e sites para evitar litígios. A iFixit demonstrou disposição para negociar um acordo de licenciamento de conteúdo com a Anthropic.
O artigo original foi publicado no Engadget em https://ift.tt/QqSarDX.
Redação Confraria Tech
Referências:
Websites accuse AI startup Anthropic of bypassing their anti-scraping rules and protocol
