403 Fehler-Technologie Unsere Indexer verwenden Cloud-Infrastruktur und identifizieren sich als Indexierungs-Bots (weitere Informationen). Nur legitime Unternehmen verwenden bekannte Bots. Ethische Unternehmen verlangen von anderen ethischen Unternehmen wie uns vertraglich, das Web nur auf identifizierbare Weise zu indizieren, einen identifizierbaren Bot-User-Agent zu verwenden und die robots.txt-Richtlinien einzuhalten.Einige Websites blockieren Datenverkehr von Cloud-Netzwerken und Indexern, die sich in ihrem User-Agent-Header als Bots identifizieren. Wenn eine Website uns blockiert oder so konfiguriert ist, dass sie Datenverkehr mit einer 403- oder 202-Fehlermeldung blockiert, wird sie mit der 403-Fehlertechnologie gekennzeichnet.