서버 로그를 사용 하 여 왜 우리의 페이지를 분석 하는 방법에 대 한 이야기 포함 될

중간 트랜잭션 http://www.aliyun.com/zixun/aggregation/6858.html "> seo 진단 Taobao 게스트 클라우드 호스트 기술 홀

많은 사람들이 하는 말은 원래, 수집, 및 다음 수정, 그들의 자신의 사이트로 전송 하지만 하지 당신이 나무는 문제에 대 한 생각은 우리가 보내는 기사는 의미가 없다, 왜 되지 포함, 매일 거미 어떻게 우리는 문서를 보낼 생각 하는 의미가 없다.

그 전에, 서버 로그 보고 및 서버 로그 로그 폴더 FTP 공간에는 일반적으로 고 토르 접미사의 끝은 알아야 합니다. 다운로드 후, 압축 해제 후 우리 두 파일, 크기 파일 접미사 이름이 도메인 이름으로 변경 되며 다음 엽니다. 우리는 텍스트 문자 잔뜩 얻을 거 야, 어디 우리가 보면, 우리의 스트립의 분석에 대해 걱정 하지 마십시오. 하지만 먼저 우리는 무엇을 알 필요가 그 IP 의미. 아래 나열 했습니다.

Baiduspider baiduspider 거미 =

Googlebot googlebot 거미 =

Sogou sogou 거미 =

야 후 야 후 거미 =

360spider = 360spider 거미

123.125.68.=123.125.68 모래 상자

220.181.68.=220.181.68 모래 상자

220.181.7.=220.181.7를 크롤링할 준비

123.125.66.=123.125.66를 크롤링할 준비

121.14.89.=121.14.89 새로운 역의 조사

203.208.60.=203.208.60 사이트 예외

210.72.225.=210.72.225 순찰

123.125.71.106=123.125.71.106 낮은 무게

123.125.71.95=123.125.71.95 낮은 무게

123.125.71.97=123.125.71.97 낮은 무게

123.125.71.117=123.125.71.117 낮은 무게

123.125.71.=123.125.71 낮은 무게 요약

220.181.108.95=220.181.108.95 대체 하루 스냅샷

220.181.108.92=220.181.108.92 무게 크롤링

220.181.108.91=220.181.108.91 종합 무게

페이지 무게 내부 220.181.108.75=220.181.108.75

220.181.108.86=220.181.108.86 무게 홈

220.181.108.89=220.181.108.89 무게 홈

220.181.108.94=220.181.108.94 무게 홈

220.181.108.97=220.181.108.97 무게 홈

220.181.108.80=220.181.108.80 무게 홈

220.181.108.77=220.181.108.77 무게 홈

220.181.108.83=220.181.108.83 무게 홈

220.181.108.=220.181.108 무게 거미 요약

우리의 분석에의 한

123.125.68.45--[24/jun/2014 15시 12분: 04 1am] ' get/xingyexinwen/129.html http/1.1 ' 9107 '-' mozilla/5.0 (Windows U ; Windows NT 5.1; ZH-CN; rv:1.9.2.12) 게 코/20101026 firefox/3.6.12 qqdownload/1.7 '

위의 정의에 따라:

123.125.68.45--[24/jun/2014 15시 12분: 04 1am] '이 문장 의미 Google 거미 3721.html에 get/xingyexinwen/129.html "> 2014 년 6 월 24 일 그것의 15: 12:04. 내 사이트 xingyexinwen/129.html의 URL을 크롤 링 하 고 샌드 박스에 넣습니다 (123.125.68.45 모래 거미 나타냅니다.) )

http/1.1 ' 9107 '-' mozilla/5.0 (Windows; U; Windows NT 5.1; ZH-CN; rv:1.9.2.12) '이 200의 반환 코드는, 담당자는 정상, 물론, 거기 반환 코드는 301, 404, 302, 304,에, 대표자의 의미를 확인할 수 있습니다. 다른 담당자가 컴퓨터의 속성, Swindows 운영 체제, 등등에 대 한 액세스입니다.

당신은, 물론, 우리가 일반적으로 Exec 양식을 사용 로그, 테이블에 TXT 파일을 분석 하 고 현기증이 로그 분석, 우리의 사이트에 어떤 거미 크롤링 알고 다음 어떤 콘텐츠를 정의 하는 더 직관적인 우리를 도울 수 알지. 물론, 로그 분석 소프트웨어 분석에 사용할 수 있습니다.

에 대해 더 많은, 수 달 버그 블로그 www.croelhui.com 검색, 무엇을, 소개 하 오신 것을 환영 합니다 나에 게는 메시지를 줄 수 있습니다.