robots.txt 설정하기 네이버 robots.txt 제출하기
작성자 정보
- GW 작성
- 작성일
컨텐츠 정보
- 976 조회
- 목록
본문
robots.txt 구성 기본요소
User-agent:
Allow: 허용할 경로
Disallow: 제한할 경로입니다
Sitemap: 사이트맵 경로(사이트맵 전체 URL
위 요소를 모두 넣지 않더라도
“User-agent”는 반드시 포함 되어야합니다
robots.txt 설정하기
만들기 : 메모장으로 입력 후 robots.txt 이름으로 저장
업로드 : 최상위 루트
-모든 검색 로봇이 내 사이트의 모든 내용 검색허용
User-agent: *
Allow: /
또는
User-agent: *
Disallow:
-내 사이트내 모든 내용 검색허용하되
-특정 디렉토리(admin,data,img)만 노출막기
user-agent: *
disallow: /admin/
disallow: /data/
disallow: /img/
위 디렉토리 폴더 자세히 :
/admin 은 admin폴더와 폴더 안에 파일까지
/admin/ 은 admin폴더만
사이트맵 위치 안내
User-agent: *
Disallow:
Sitemap: http://사이트주소/sitemap.xml
네이버 또는 구글에 제출할땐 아래 표기가 무난하지 않을까요?
-내 사이트내 모든 컨텐츠 검색허용
User-agent: *
Allow: /
아재감성 아재공간 다온네
-
등록일 03.15
-
등록일 04.11
-
등록일 04.08
-
등록일 03.15
-
등록일 04.13
-
등록일 03.11
-
등록일 05.09
-
등록일 03.08
-
등록일 02.23
-
등록일 04.19
-
등록일 03.08
-
등록일 02.26
-
등록일 03.15
-
등록일 05.17
-
등록일 03.25
-
등록일 02.25
-
등록일 03.19
-
등록일 03.08
-
등록일 04.05
-
등록일 03.13
-
등록일 03.15
-
등록일 03.08
-
등록일 05.16
-
등록일 04.23
-
등록일 05.10
-
등록일 04.20
-
등록일 04.05
-
등록일 03.18
-
등록일 03.19
-
등록일 04.04
추천 업체
아재 음악
80년대 하드락 파이널 카운트다운 1986년
90년대 유고 출신의 네덜란드 배우겸 가수 타티아나의 명곡 산타마리아.일렉트로닉의 본고장 스웨덴과 네덜란드에서 음악활동을 하며 많은 앨범들을 출…
아재감성 음악 베드보이즈블루 You're a woman I'm a man 1985년
Daler Mehndi - Tunak Tunak Tun 1998년Tunak tunak tun Tunak tunak tunTunak tunak t…