Het bekijken van dit forum als gast is beperkt
  • Vragen? Wacht niet langer op de antwoorden! Login of Registreer en plaats jouw vraag! Wij zullen je vragen z.s.m. beantwoorden.

TWEAKERS 'Ook OpenAI en Anthropic negeren robots.txt-verzoeken om sites niet te scrapen'

HighFlow

HighFlow

Moderator
Forumleiding
OpenAI en Anthropic negeren verzoeken van websites in robots.txt-bestanden om niet gescrapet te worden. Dat beweert Business Insider. Eerder schreef Wired al dat het bedrijf achter de AI-zoekmachine Perplexity dergelijke nietscrapenverzoeken ook negeert.

Continue reading...
 
Terug
Bovenaan