네이트 - 웹문서 검색 "위 사이트의 로봇룰을 준수하여, 관련 정보를 보여드리지 못하였습니다" 메시지는 어떤 의미인가요?
NATE[검색서비스] 웹문서 검색 "위 사이트의 로봇룰을 준수하여, 관련 정보를 보여드리지 못하였습니다" 메시지는 어떤 의미인가요? 로봇 배제 표준(Robots Exclusion Standard)은 사이트의 루트에 위치하는 robots.txt를 통해 설정되며, 웹문서 수집 로봇이 사이트 내 정보를 수집하는 것을 허용 또는 제한하는 일종의 로봇 규칙입니다. 사용자는 robots.txt에 명시한 로봇규칙 이외로, 웹페이지의 me…