봇 인터넷 인덱싱

어떤 봇이 웹사이트를 색인화하나요?

이 페이지는 특정 시점부터 당사의 비밀 루트 도메인 엔드포인트를 방문하는 봇 및 자동화 에이전트를 보여줍니다. 18 6월 2026. 찾기 어렵게 하기 위해 도메인 이름은 거의 사용되지 않는 TLD에 있는 모호한 무작위 문자와 숫자 문자열이었습니다. 웹사이트는 JavaScript, 이미지, 미디어 및 프리미엄 웹 기술을 로드하여 사이트가 얼마나 깊이 색인되었는지 확인했습니다.

경쟁자는 어디에 있나요? 😳

우리의 비밀 웹사이트가 만들어진 이래로 18th 6월 2026, 기술 인덱싱 경쟁업체라고 자칭하는 회사 중 단 한 곳도 해당 웹사이트를 찾지 못했습니다. 에서 109 실험이 진행된 일수입니다.

 

BuiltWith는 해당 웹사이트가 생성된 지 이틀 만에 웹사이트를 발견했습니다. 우리 자신에 대한 내부 정보 없이. 즉, 기술 추적을 위해 경쟁사를 이용한다면 경쟁사가 사이트를 찾더라도 매우 큰 차이로 놓칠 것입니다.

424 식별된 사용자 에이전트가 만들어졌습니다. 121,950 다양한 요청에 대한 답변 74,056 세션에서 10,316 IP 주소. 마지막 생성 날짜 05 10월 2026 00:20 UTC.

apple.com 다음을 통해 확인되었습니다. 9 사용자 에이전트, 만들기 244 요청 34 IP 주소.

첫 방문은 19 시간s, 35 분s, 3 두번째s 사이트가 공개된 후.

10월 2026
apple.com
apple.com Search

Apple operates Applebot to index public web content for products such as Siri, Spotlight, and Safari search features.
Mozilla/5.0 (Macintosh; Intel Mac OS X 14.5; rv:121.0) Gecko/20100101 Firefox/121.0; compatible; Applebot/0.1; +http://www.apple.com/go/applebot

84 날 사이트 출시 이후
apple.com
apple.com Search

Apple operates Applebot to index public web content for products such as Siri, Spotlight, and Safari search features.
Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/134.0.860.219 Safari/537.36 Edg/134.0.860.219; compatible; Applebot/0.1; +http://www.apple.com/go/applebot

84 날 사이트 출시 이후
apple.com
apple.com Search

Apple operates Applebot to index public web content for products such as Siri, Spotlight, and Safari search features.
Mozilla/5.0 AppleWebKit/537.36 (KHTML, like Gecko); compatible; Applebot/0.1; +http://www.apple.com/go/applebot

84 날 사이트 출시 이후
apple.com
apple.com Search

Apple operates Applebot to index public web content for products such as Siri, Spotlight, and Safari search features.
Mozilla/5.0 (Macintosh; Intel Mac OS X 14_5) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/131.0.6260.54 Safari/537.36; compatible; Applebot/0.1; +http://www.apple.com/go/applebot

84 날 사이트 출시 이후
apple.com
apple.com Search

Apple operates Applebot to index public web content for products such as Siri, Spotlight, and Safari search features.
Mozilla/5.0 (iPhone; CPU iPhone OS 18_4 like Mac OS X) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/148.0.377.124 Mobile Safari/537.36; compatible; Applebot/0.1; +http://www.apple.com/go/applebot

84 날 사이트 출시 이후
apple.com
apple.com Search

Apple operates Applebot to index public web content for products such as Siri, Spotlight, and Safari search features.
Mozilla/5.0 (Linux; Android 14; Pixel 8) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/120.0.6507.198 Mobile Safari/537.36; compatible; Applebot/0.1; +http://www.apple.com/go/applebot

84 날 사이트 출시 이후
apple.com
apple.com Search

Apple operates Applebot to index public web content for products such as Siri, Spotlight, and Safari search features.
Mozilla/5.0 AppleWebKit/537.36 (KHTML, like Gecko; compatible; Applebot/0.1; +http://www.apple.com/go/applebot)

84 날 사이트 출시 이후
apple.com
apple.com Search

Apple operates Applebot to index public web content for products such as Siri, Spotlight, and Safari search features.
Mozilla/5.0 (Macintosh; Intel Mac OS X 10_15_7) AppleWebKit/605.1.15 (KHTML, like Gecko) Version/17.4 Safari/605.1.15 (Applebot/0.1; +http://www.apple.com/go/applebot)

1 낮 사이트 출시 이후
apple.com
apple.com Search

Apple operates Applebot to index public web content for products such as Siri, Spotlight, and Safari search features.
Mozilla/5.0 (compatible; Applebot/0.1; +http://www.apple.com/go/applebot)

0 날 사이트 출시 이후
사이트 출시일 18 6월 2026