P0l4ris

#Main

#Robots.txt경로 탐색

 - 경로가 하나 출력되었다.

User-agent: *  ---> 모든 로봇

Disallow : /robot_flag/  ---> "/robot_flag/" 경로에 접근을 제한 

 즉, `모든 로봇은 "/robot_flag/" 경로에 접근을 제한한다.` 가 페이지가 의미하는 내용이다.

 Robots.txt란?

 -> 웹 사이트에 로봇(봇)이 접근하는 것을 방지하기 위한 프로토콜을 사용하는데, 이에 대한 접근제한에 대한 설명 기술

- 출처 -

https://ko.wikipedia.org/wiki/%EB%A1%9C%EB%B4%87_%EB%B0%B0%EC%A0%9C_%ED%91%9C%EC%A4%80

#/robot_flag/로 접속