robots.txt 설정하기 네이버 robots.txt 제출하기
작성자 정보
- GW 작성
- 작성일
컨텐츠 정보
- 841 조회
- 목록
본문
robots.txt 구성 기본요소
User-agent:
Allow: 허용할 경로
Disallow: 제한할 경로입니다
Sitemap: 사이트맵 경로(사이트맵 전체 URL
위 요소를 모두 넣지 않더라도
“User-agent”는 반드시 포함 되어야합니다
robots.txt 설정하기
만들기 : 메모장으로 입력 후 robots.txt 이름으로 저장
업로드 : 최상위 루트
-모든 검색 로봇이 내 사이트의 모든 내용 검색허용
User-agent: *
Allow: /
또는
User-agent: *
Disallow:
-내 사이트내 모든 내용 검색허용하되
-특정 디렉토리(admin,data,img)만 노출막기
user-agent: *
disallow: /admin/
disallow: /data/
disallow: /img/
위 디렉토리 폴더 자세히 :
/admin 은 admin폴더와 폴더 안에 파일까지
/admin/ 은 admin폴더만
사이트맵 위치 안내
User-agent: *
Disallow:
Sitemap: http://사이트주소/sitemap.xml
네이버 또는 구글에 제출할땐 아래 표기가 무난하지 않을까요?
-내 사이트내 모든 컨텐츠 검색허용
User-agent: *
Allow: /
아재감성 아재공간 다온네
-
등록일 03.19
-
등록일 03.25
-
등록일 03.08
-
등록일 03.08
-
등록일 04.23
-
등록일 04.08
-
등록일 04.11
-
등록일 02.23
-
등록일 03.08
-
등록일 02.26
-
등록일 02.25
-
등록일 04.13
-
등록일 03.18
-
등록일 04.04
-
등록일 03.13
-
등록일 04.05
-
등록일 03.15
-
등록일 03.19
-
등록일 04.05
-
등록일 03.13
-
등록일 04.20
-
등록일 03.15
-
등록일 03.15
-
등록일 03.11
-
등록일 04.26
-
등록일 04.19
-
등록일 03.15
-
등록일 03.08
-
등록일 03.18
-
등록일 02.05
추천 업체
아재 음악
N-Trance - Stayin' Alive Original Mix 1995년
SAYONARA BABY 1997년음악 정보에 대해 아는 바가 없고년도 역시 맞는지 모르겠다청소좀 하려는데 뉴스도 시끄럽게 들리고좀 달릴만한(?…
컬처비트-미스터베인 Culture Beat - Mr. Vain 1993년
송골매-하늘 나라 우리님 1985년 하늘은 매서웁고 흰눈이 가득한 날사랑하는 님 찾으러 천상에 올라갈재신 벗어 손에 쥐고 버선 벗어 품에 품고곤…