robots.txt 설정하기 네이버 robots.txt 제출하기
작성자 정보
- GW 작성
- 작성일
컨텐츠 정보
- 929 조회
- 목록
본문
robots.txt 구성 기본요소
User-agent:
Allow: 허용할 경로
Disallow: 제한할 경로입니다
Sitemap: 사이트맵 경로(사이트맵 전체 URL
위 요소를 모두 넣지 않더라도
“User-agent”는 반드시 포함 되어야합니다
robots.txt 설정하기
만들기 : 메모장으로 입력 후 robots.txt 이름으로 저장
업로드 : 최상위 루트
-모든 검색 로봇이 내 사이트의 모든 내용 검색허용
User-agent: *
Allow: /
또는
User-agent: *
Disallow:
-내 사이트내 모든 내용 검색허용하되
-특정 디렉토리(admin,data,img)만 노출막기
user-agent: *
disallow: /admin/
disallow: /data/
disallow: /img/
위 디렉토리 폴더 자세히 :
/admin 은 admin폴더와 폴더 안에 파일까지
/admin/ 은 admin폴더만
사이트맵 위치 안내
User-agent: *
Disallow:
Sitemap: http://사이트주소/sitemap.xml
네이버 또는 구글에 제출할땐 아래 표기가 무난하지 않을까요?
-내 사이트내 모든 컨텐츠 검색허용
User-agent: *
Allow: /
아재감성 아재공간 다온네
-
등록일 03.19
-
등록일 02.23
-
등록일 04.26
-
등록일 03.19
-
등록일 04.05
-
등록일 04.11
-
등록일 03.11
-
등록일 03.08
-
등록일 03.13
-
등록일 04.04
-
등록일 03.18
-
등록일 03.15
-
등록일 03.25
-
등록일 03.08
-
등록일 02.25
-
등록일 03.18
-
등록일 03.13
-
등록일 02.26
-
등록일 04.13
-
등록일 04.20
-
등록일 03.08
-
등록일 04.23
-
등록일 05.09
-
등록일 03.15
-
등록일 03.15
-
등록일 05.10
-
등록일 03.15
-
등록일 04.08
-
등록일 05.07
-
등록일 04.05
추천 업체
아재 음악
지나티-Gina T-Tokyo By Night 1987년
Abba - Mamma Mia (1975년)Mamma Mia는 이탈리아어로 my mother, 내 어머니란 뜻'맙소사, 어머나, 어쩌나'처럼 놀…
시대의 획 듀스 베스트 30곡 연속감상 음악감상 1993년
서유석/비야 비야 1977(음반 수록곡)Side A1.가는 세월2.기다림3.짧은 순간4.황소걸음5.작은소리 큰소리6.다시 부르는 노래Side B…