Wat betekent ClaudeBot?
ClaudeBot is de crawler van Anthropic, de maker van de Claude-modellen. Hij haalt webcontent op voor modeltraining en, in toenemende mate, voor agentic toepassingen waarin Claude actuele webinformatie moet raadplegen om een taak uit te voeren — zoals het vergelijken van producten namens een gebruiker. Net als bij GPTBot en PerplexityBot geldt dat je ClaudeBot via robots.txt kunt sturen; voor agent-zichtbaarheid is toelaten de gangbare aanpak.