반응형 티스토리 설정1 네이버 웹마스터도구 robots.txt 설정 네이버 웹마스터도구 robots.txt 1.네이버 서치어드바이저에서 웹마스터도구 네이버에 네이버웹마스터도구를 검색 2. 웹마스터 도구 선택 3. 사이트관리에서 사이트 선택 4. 사이트 관리 검증 5. robots 선택 수집요청 robots.txt 다운로드 6. 티스토리로 가서 스킨편집 선택 7. 스킨편집에서 html 편집 8. 다운로드한 robots.txt 파일을 업로드합니다. 9. URL 검사 확인 10. ✅ 미수집이라고 나올수도 있으나 조금시간이 지나면 정상적으로 처리 ✅ robots.txt `robots.txt`는 웹사이트의 루트 디렉터리에 위치하는 텍스트 파일로, 검색 엔진 로봇(크롤러)이 해당 사이트의 어떤 부분을 크롤링할 수 있는지 또는 크롤링할 수 없는지 지시하는 파일입니다. .. 2024. 5. 29. 이전 1 다음 반응형