[WEB] HTTP - Header & Body
REP: Robots Exclusion Protocol검색엔진 서비스(구글, 네이버 ...etc) 에서 크롤링을 하기 전 robots.txt 파일을 파싱하여 검색엔진에게 수집할 페이지와 차단할 페이지 정의sitemap.xml의 위치사용하고자 하는 검색엔진 Search
SEO에 영향을 미치는 Head Elements