큰 데이터 시작 페이스 북에서 영감을 찾을 수 있다

큰 데이터의 추세를 예측 하 고 귀하의 우려에 대해 명확 하 게 http://www.aliyun.com/zixun/aggregation/1560.html "> 페이스 북은 선택의 여지가, 그것은 거 대 한 양의 데이터 (100PB, 수집 되기 때문에 102400 TB). 쿼리 언어 + hadoop 하이브 +이 데이터, 카산드라 nosql 데이터 저장소를 처리 하기 위해 분산된 데이터베이스는 최고의 파트너입니다. 얼마나 큰 데이터 업에 대 한이 기사 회담의 돌파구에 대 한 페이스 북에서 배워야 한다.

기회 중 하나: Hadoop의 인기

하 둡과 NoSQL을 통해 인프라 수준 혁신 기회입니다.

페이스 북에서 친구 추천에 이르기까지 방향 광고 데이터를 센터 분석, 큰 데이터 바이트 크기 조각으로 조각화 되어 Hadoop의 거의 모든 측면을 사용 합니다. 그러나,이 모든 서비스를 제공 하는 필요는 의미 있는 방법으로 모든 부서에서 사용자 Hadoop 상호 작용 수 있도록 의미 합니다.

사용자 지정된 도구, 인터페이스 및 가상 레이어 도움이이 문제를 해결. 페이스 북의 비-기술 사용자는 보고서를 생성 및 분석 기술 장애물을 낮춘 후 볼 Hadoop를 사용할 수도 있습니다. 하이브를 만드는 데 도움 몇 가지 전 페이스 북 직원 또한 하이브를 통해 Hadoop에 요청 액세스 서명 SQL 인터페이스를 제공 하는 하이브-qubole의 클라우드 버전을 출시 했다. 페이스 북 hadoop을 사용 하 여 어려움을 줄이고 대용량 데이터의 사용의 효율성을 증가 도움이 될 것 입 도구를 만들려고 합니다.

두번째 기회: Hadoop 넘어

하지만 때로는 점프 하 둡과 NoSQL 저장소 등 기존 프레임 워크는 새로운 세계를 만들 수 있습니다. 그것은 모든 수요에 따라 달라 집니다. 무료 및 오픈 소스 이기 때문에 모두는 Hadoop을 사용 합니다. 그러나, 귀하의 요구를 달성 하기 위해 자주 해야 하 둡에 대 한 작업을 많이 해야 합니다. 많은 큰 데이터 문제를 아무 상관이 Hadoop, 그래서 새로운 하나의 해결책이 될 수 있다. 페이스 북의 아틀라스 데이터베이스, MySQL을 사용 하 고 그것은 개발된 일정 및 뉴스의 배경, 그리고 모든 것 필요에 따라 선택 되어야 한다.

하지만 신생 기업, 그것은 교환 응용 프로그램 개발 플랫폼을 선택에 관해서. Accel의 핑 리의 조언을 충분히 큰 적 이다. 위대함을 달성 하기 위해 Hadoop을 통해 휴식을 할 수 있습니다.

3 기회: 더 큰, 데이터 센터 처럼 큰

페이스 북 8 월에는 보다 안정적인 웹 트랜잭션 스트림 보다는 덜-보다-상수 데이터를 저장, 처리 하기 위해 처음부터 데이터 센터를 설계 하는 의도로 올해 데이터 센터에 대 한 새로운 심층 스토리지 전략 시작.

이 변화는 절대로 과거의 데이터 센터에서 다른 많은 진보적인 변화. 이 에너지 집약적인 데이터 센터 컴퓨팅 전력 수요의 훨씬 작은 금액을 저축의 모든 정도 할당 하려고 하지만 이러한 프로세스 여전히 사용자 및 분석 엔진 데이터를 제공 해야 합니다. 이 점점 더 많은 기업이 기록 데이터의 중요성을 잘 알고 있기 때문에 거 대 한 도전 이다.

페이스 북의 디자인 프로젝트를 통해 열 계산, 어디 일부 관리 작업의 신생 기업에 대 한 좋은 소식은, 아파치 하 둡 프로젝트에서 수행 됩니다 그리고 그들은 단지 할 남아 열 것 이다.

(책임 편집기: 유산의 좋은)