[
  {"crawler": "GPTBot", "herausgeber": "OpenAI", "mission": "Training", "robots_txt_token": "GPTBot", "tolerierte_hops": 5, "verhalten_jenseits_des_limits": "Stiller Abbruch, Seite fehlt im Trainingsindex"},
  {"crawler": "OAI-SearchBot", "herausgeber": "OpenAI", "mission": "ChatGPT Search (Echtzeit)", "robots_txt_token": "OAI-SearchBot", "tolerierte_hops": 3, "verhalten_jenseits_des_limits": "Antwort generiert ohne die Seite zu zitieren"},
  {"crawler": "ChatGPT-User", "herausgeber": "OpenAI", "mission": "Agent (Besuch auf Anfrage)", "robots_txt_token": "ChatGPT-User", "tolerierte_hops": 3, "verhalten_jenseits_des_limits": "Bedarfsabruf fehlgeschlagen für den Nutzer"},
  {"crawler": "ClaudeBot", "herausgeber": "Anthropic", "mission": "Training", "robots_txt_token": "ClaudeBot", "tolerierte_hops": 5, "verhalten_jenseits_des_limits": "Stiller Abbruch"},
  {"crawler": "anthropic-ai", "herausgeber": "Anthropic", "mission": "Training (Legacy)", "robots_txt_token": "anthropic-ai", "tolerierte_hops": 5, "verhalten_jenseits_des_limits": "Stiller Abbruch"},
  {"crawler": "Claude-User", "herausgeber": "Anthropic", "mission": "Agent (Besuch auf Anfrage)", "robots_txt_token": "Claude-User", "tolerierte_hops": 3, "verhalten_jenseits_des_limits": "Bedarfsabruf fehlgeschlagen"},
  {"crawler": "Claude-SearchBot", "herausgeber": "Anthropic", "mission": "Claude Search (Echtzeit)", "robots_txt_token": "Claude-SearchBot", "tolerierte_hops": 3, "verhalten_jenseits_des_limits": "Antwort generiert ohne die Seite"},
  {"crawler": "PerplexityBot", "herausgeber": "Perplexity", "mission": "Indexierung für Antworten", "robots_txt_token": "PerplexityBot", "tolerierte_hops": 5, "verhalten_jenseits_des_limits": "Stiller Abbruch, Seite fehlt in Perplexity-Quellen"},
  {"crawler": "Perplexity-User", "herausgeber": "Perplexity", "mission": "Agent (Besuch auf Anfrage)", "robots_txt_token": "Perplexity-User", "tolerierte_hops": 3, "verhalten_jenseits_des_limits": "Bedarfsabruf fehlgeschlagen für den Nutzer"},
  {"crawler": "Googlebot", "herausgeber": "Google", "mission": "Referenz (klassisches SEO)", "robots_txt_token": "Googlebot", "tolerierte_hops": 10, "verhalten_jenseits_des_limits": "Verzögerte Indexierung, manchmal wiederholt"}
]
