중간 트랜잭션 http://www.aliyun.com/zixun/aggregation/6858.html "> seo 진단 Taobao 게스트 클라우드 호스트 기술 홀
귀하의 사이트는 어떻게 개인 정보 또는 기밀 웹 페이지를 포함 하는 경우 다음 방법 금지 검색 엔진 포함 크롤링, 다음 Houqingrong에 게, 검색 엔진 있도록 크롤링 사이트에 포함 되지 않습니다 바랍니다.
Robots.txt의 첫 번째 방법
검색 엔진 기본값 Robots.txt 프로토콜을 준수 하 여 만들고 robots.txt 사이트 루트 디렉터리에 텍스트 파일, 코드를 다음과 같이 편집:
사용자 에이전트: *
허용 안 함:
코드를 통해 검색 엔진을 말할 수 있는 포함 하는 사이트를 크롤 링 하지 않습니다.
두 번째, 웹 페이지 코드
집 코드 < 머리 >와 < / 헤드 >, 추가 < 메타 이름 "로봇" 내용 = "noarchive" = > 코드, 웹 페이지의 스냅샷을 표시 하 고 웹 사이트를 크롤 링에서 검색 엔진을 금지.
바이 두 검색 엔진을 금지 하는 방법 포함 크롤링 페이지
1, robots.txt 파일 편집, 디자인으로 표시:
사용자-에이전트: baiduspider
금지: /
2 집 코드 < 머리 > 및 < / 헤드 >, 추가 < 메타 이름 = "Baiduspider" 내용 "noarchive" = > 금지 될 수 있습니다 바이 두 검색 엔진 크롤 링 사이트와 웹 페이지의 스냅샷을 표시.
3, 바이 관리 담당자, 사서함 주소 문의: webmaster@baidu.com, 웹사이트 연락처 상자 이메일, 사실 설명 바이 확인, 웹 페이지 중지 포함 크롤링 후 상황의 스냅숏 삭제.
4, 바이 두의 "바이 스냅숏" 포스트 바 및 "바이 불만" 게시, 이유, 웹 사이트 스냅샷 삭제를 나타내는 게시물을 보낼 때 바이 관리 참조 주어질 것 이다 치료.
구글 검색 엔진 모음 크롤링 페이지를 금지 하는 방법
1, robots.txt 파일 편집, 디자인으로 표시:
사용자-에이전트: googlebot
금지: /
2 집 코드 < 머리 > 및 < / 헤드 >, 추가 < 메타 이름 = "Googlebot" 내용 "noarchive" = > 금지 될 수 있습니다 바이 두 검색 엔진 크롤 링 사이트와 웹 페이지의 스냅샷을 표시.
SEO 최적화: Houqingrong 원래 다운로드 URL: http://www.noseo.org.cn/jinzhisousuoyinqingshouluzhuaqu.html
모든 권리 소유입니다. 무단 전재는 저자와 원래의 사이트와이 성명의 형태에 연결 되어야 합니다.
웹 마 스 터 쿼리 도구 http://tool.admin5.com