중간 트랜잭션 http://www.aliyun.com/zixun/aggregation/6858.html "> seo 진단 Taobao 게스트 클라우드 호스트 기술 홀
웹 사이트는 무엇입니까? 그것은 프로토콜, 하지 명령.
또는 SEO에 종사 하는 학습으로 최적화 친구 검색 스파이더, 알고 있어야 하지만이 대 한 검색 스파이더가 계약에 따라 자주 들 었. 로봇은 웹 사이트를 크롤링할 때 볼을 첫 번째 파일입니다. 그것은 거미 서버 공간에 파일을 크롤링할 수에 게 사용 되 고 어떤 파일 필요가 없습니다 크롤 링. 또한이 때문에, 좋은 로봇을 사용 하 여 매우 쉽습니다 귀하의 사이트에 대 한 전력, 그것을 작성 하는 방법 주장?
1. 사이트 중복 페이지를 피하기 위해
많은 웹 사이트 제공 다양 한 검색 버전, 하지만 대부분은 사용자, 사용자 경험을 향상 하지만 거미는 거미 식별 하는 기본 및 보조, 한 번 생각 하는 악의적인 반복, 그래서 오른쪽, 무거운 K 역 풀 머리 아래로 빛에 아 어렵기 때문에 조금 어려움을 발생 했습니다.
사용자 에이전트: *
금지: / 사이트맵 / "아니 거미 크롤링 텍스트 페이지"
확장 읽기: "혜 주 SEO 블로그 K 역 미스 테리" (비슷한 문제를의 시작에 블로그 시작에 또한 너희 Jianhui K, 특정 링크를 보고 했다)
2. 보안 웹사이트
아마 어떤 사람들은 큰 물음표. 로봇 및 웹 사이트 보안 관계를 올려 하는 방법?이 해커, 많은 저수준 해커는 보안 방지 아 그래서 침공 사이트의 목표를 달성 하기 위해 검색 기본 배경 방문을 통해 하는 것입니다.
사용자 에이전트: *
금지: / 관리자 / "금지 거미 관리자 디렉터리 아래의 모든 파일을 크롤 링 에서"
확장 읽기: "워드 프레스 프로그램 보안 설정 능력" (나는 공격, 그래서 심지어 문제를 무시할 수 없는 보안의 세부 사항, 특정 보기 너희 Jianhui 블로그)
3. "도난" 되지 않도록 링크를 방지
일반 hotlinking 아니다, 그러나 한 번은 검색 엔진 "hotlinking", 다음 백 메가 광대역 나는 너무, 그래서 만약 하지 그림 사이트 할 하지만 또한 hotlinking을 않도록 하려면 다음 보호 될 수 있습니다 무서 워 요.
사용자 에이전트: *
부인:.jpg$
4. 제출 사이트맵
친구를 최적화 하기 위해 지금 사이트에 대 한 서구, 모두 알고 할 사이트 맵, 하지만 있을 것입니다 항상 친구 제출 해야할지, 그냥 생각 페이지에 링크를 추가한 다음 완료. 사실, 로봇 예 혜 주 SEO 블로그를 조금,이 기능을 제출 해야 합니다.
Sitemap:http://www.huizhouseo.cn/sitemap_baidu.xml
Sitemap:http://www.huizhouseo.cn/sitemap.html (참고는 Sitemap의 s 대 수)
5. 금지 특정 레벨 2 개의 도메인 이름 탐색
일부 웹 사이트, 회원에 일부 VIP 권한 서비스를 제공 하지만이 서비스를 검색 엔진에 의해 검색 (동일한, CSS와 JS와 레벨에 두 개의 디렉터리 파일 필요가 없습니다 크롤 링도 그래서)
사용자 에이전트: *
금지: /
위의 5 포인트 로봇 믿습니다 충분 SEO 초보자 바이 말했다, 우리는 하 고 검색 엔진 거미 제어 능력을 많이 향상을 검색 하도록 엔진 친구, 그래서 어떤 커뮤니케이션을 증가 필수적인 일부 불필요 한 횡 경 막 바로 제거 되므로 이어야 한다! 혜 주 SEO 블로그 http://이 문서 www.huizhouseo.cn/seojichu/766.html 너희 Jianhui 피드, 지정 하십시오 무단 전재!