Bot-Internet-Indizierung

Welche Bots indizieren Websites?

Diese Seite zeigt die Bots und automatisierten Agenten, die seit unserem geheimen Root-Domain-Endpunkt unseren geheimen Root-Domain-Endpunkt besuchen. 18 Juni 2026. Um die Suche zu erschweren, bestand der Domänenname aus einer obskuren, zufälligen Buchstaben- und Zahlenfolge einer selten verwendeten TLD. Die Website lud JavaScript, Bilder und Medien sowie Premium-Webtechnologien, um zu bestimmen, wie tief die Site indiziert wurde.

Wo sind die Konkurrenten? 😳

Da unsere geheime Website erstellt wurde am 18th Juni 2026, Kein einziges Unternehmen, das sich als Konkurrent im Bereich Technologieindexierung sieht, fand die Website. im 110 Tage, seit denen das Experiment läuft.

 

BuiltWith fand die Website innerhalb von 2 Tagen nach deren Existenz. ohne Insiderwissen von uns. Das bedeutet, dass die Websites Ihres Konkurrenten, wenn Sie ihn für die Technologieverfolgung verwenden, bei weitem übersehen werden, wenn sie überhaupt gefunden werden.

424 identifizierte Benutzeragenten 122.530 Anfragen über 74.305 Sitzungen von 10.370 IP-Adressen. Datum zuletzt generiert 06 Oktober 2026 00:20 UTC.

developers.facebook.com wurde identifiziert durch 18 Benutzeragenten, Herstellung 155 Anfragen von 91 IP-Adressen.

Sein erster Besuch war 19 Stundes, 35 Minutes, 3 zweites nachdem die Site live geschaltet wurde.

Oktober 2026
developers.facebook.com
developers.facebook.com Social Media

Meta's developer platform documents meta-externalagent, which fetches public web content for Meta products and AI systems.
Mozilla/5.0 (iPhone; CPU iPhone OS 18_4 like Mac OS X) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/136.0.8674.164 Mobile Safari/537.36; compatible; meta-externalagent/1.1; +https://developers.facebook.com/docs/sharing/webmasters/crawler

84 Tage seit dem Start der Website
developers.facebook.com
developers.facebook.com Social Media

Meta's developer platform documents meta-externalagent, which fetches public web content for Meta products and AI systems.
Mozilla/5.0 (Macintosh; Intel Mac OS X 13_6_7) AppleWebKit/605.1.15 (KHTML, like Gecko) Version/18.3 Safari/605.1.15; compatible; meta-externalagent/1.1; +https://developers.facebook.com/docs/sharing/webmasters/crawler

84 Tage seit dem Start der Website
developers.facebook.com
developers.facebook.com Social Media

Meta's developer platform documents meta-externalagent, which fetches public web content for Meta products and AI systems.
Mozilla/5.0 (Linux; Android 15; SM-S918B) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/114.0.7026.241 Mobile Safari/537.36; compatible; meta-externalagent/1.1; +https://developers.facebook.com/docs/sharing/webmasters/crawler

84 Tage seit dem Start der Website
developers.facebook.com
developers.facebook.com Social Media

Meta's developer platform documents meta-externalagent, which fetches public web content for Meta products and AI systems.
Mozilla/5.0 (X11; Ubuntu; Linux x86_64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/122.0.4916.67 Safari/537.36; compatible; meta-externalagent/1.1; +https://developers.facebook.com/docs/sharing/webmasters/crawler

84 Tage seit dem Start der Website
developers.facebook.com
developers.facebook.com Social Media

Meta's developer platform documents meta-externalagent, which fetches public web content for Meta products and AI systems.
Mozilla/5.0 (compatible; meta-externalagent/1.1; +https://developers.facebook.com/docs/sharing/webmasters/crawler)

84 Tage seit dem Start der Website
developers.facebook.com
developers.facebook.com Social Media

Meta's developer platform documents meta-externalagent, which fetches public web content for Meta products and AI systems.
Mozilla/5.0 AppleWebKit/537.36 (KHTML, like Gecko; compatible; meta-externalagent/1.1; +https://developers.facebook.com/docs/sharing/webmasters/crawler)

84 Tage seit dem Start der Website
developers.facebook.com
developers.facebook.com Social Media

Meta's developer platform documents meta-externalagent, which fetches public web content for Meta products and AI systems.
Mozilla/5.0 AppleWebKit/537.36 (KHTML, like Gecko); compatible; meta-externalagent/1.1; +https://developers.facebook.com/docs/sharing/webmasters/crawler

84 Tage seit dem Start der Website
developers.facebook.com
developers.facebook.com Social Media

Meta's developer platform documents meta-externalagent, which fetches public web content for Meta products and AI systems.
Mozilla/5.0 (Macintosh; Intel Mac OS X 10_15_7) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/133.0.1165.10 Safari/537.36; compatible; meta-externalagent/1.1; +https://developers.facebook.com/docs/sharing/webmasters/crawler

84 Tage seit dem Start der Website
developers.facebook.com
developers.facebook.com Social Media

Meta's developer platform documents meta-externalagent, which fetches public web content for Meta products and AI systems.
Mozilla/5.0 (iPhone; CPU iPhone OS 17_0 like Mac OS X) AppleWebKit/605.1.15 (KHTML, like Gecko) Version/18.7 Mobile/15E148 Safari/604.1; compatible; meta-externalagent/1.1; +https://developers.facebook.com/docs/sharing/webmasters/crawler

84 Tage seit dem Start der Website
developers.facebook.com
developers.facebook.com Social Media

Meta's developer platform documents meta-externalagent, which fetches public web content for Meta products and AI systems.
Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/145.0.0.0 Safari/537.36 (compatible; meta-webindexer/1.1 (+https://developers.facebook.com/docs/sharing/webmasters/crawler))

77 Tage seit dem Start der Website
developers.facebook.com
developers.facebook.com Social Media

Meta's developer platform documents meta-externalagent, which fetches public web content for Meta products and AI systems.
meta-webindexer/1.1 (+https://developers.facebook.com/docs/sharing/webmasters/crawler)

63 Tage seit dem Start der Website
developers.facebook.com
developers.facebook.com Social Media

Meta's developer platform documents meta-externalagent, which fetches public web content for Meta products and AI systems.
Mozilla/5.0 (Macintosh; Intel Mac OS X 10_15_7) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/145.0.0.0 Safari/537.36 (compatible; meta-webindexer/1.1 (+https://developers.facebook.com/docs/sharing/webmasters/crawler))

63 Tage seit dem Start der Website
developers.facebook.com
developers.facebook.com Social Media

Meta's developer platform documents meta-externalagent, which fetches public web content for Meta products and AI systems.
Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/144.0.0.0 Safari/537.36 Edg/144.0.0.0 (compatible; meta-externalagent/1.1 (+https://developers.facebook.com/docs/sharing/webmasters/crawler))

55 Tage seit dem Start der Website
developers.facebook.com
developers.facebook.com Social Media

Meta's developer platform documents meta-externalagent, which fetches public web content for Meta products and AI systems.
Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/145.0.0.0 Safari/537.36 Edg/145.0.0.0 (compatible; meta-externalagent/1.1 (+https://developers.facebook.com/docs/sharing/webmasters/crawler))

30 Tage seit dem Start der Website
developers.facebook.com
developers.facebook.com Social Media

Meta's developer platform documents meta-externalagent, which fetches public web content for Meta products and AI systems.
Mozilla/5.0 (X11; Linux x86_64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/145.0.0.0 Safari/537.36 (compatible; meta-externalagent/1.1 (+https://developers.facebook.com/docs/sharing/webmasters/crawler))

30 Tage seit dem Start der Website
Juli 2026
developers.facebook.com
developers.facebook.com Social Media

Meta's developer platform documents meta-externalagent, which fetches public web content for Meta products and AI systems.
Mozilla/5.0 (Macintosh; Intel Mac OS X 10_15_7) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/145.0.0.0 Safari/537.36 (compatible; meta-externalagent/1.1 (+https://developers.facebook.com/docs/sharing/webmasters/crawler))

30 Tage seit dem Start der Website
developers.facebook.com
developers.facebook.com Social Media

Meta's developer platform documents meta-externalagent, which fetches public web content for Meta products and AI systems.
Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/145.0.0.0 Safari/537.36 (compatible; meta-externalagent/1.1 (+https://developers.facebook.com/docs/sharing/webmasters/crawler))

27 Tage seit dem Start der Website
developers.facebook.com
developers.facebook.com Social Media

Meta's developer platform documents meta-externalagent, which fetches public web content for Meta products and AI systems.
meta-externalagent/1.1 (+https://developers.facebook.com/docs/sharing/webmasters/crawler)

0 Tage seit dem Start der Website
Website gestartet am 18 Juni 2026