Hadoop 2 드디어 나온다: 큰 데이터는 앞으로 거 대 한 단계를 걸립니다

아파치 소프트웨어 재단은 마침내 최신 Hadoop 2 데이터 분석 플랫폼을 출시 했다. Hadoop 2 하 둡 파일 시스템 (HDFS)를 항상 사용 가능한 기능을 추가 하는 동안 원사 데이터 처리 및 서비스 엔진을 지원 하 여 컴퓨팅 엔진을 향상 시킵니다.
비록 HDFs Cloudera, 같은 일부 Hadoop 배포판에 업그레이드 되 고 일부 기업 등 필수적으로 제공 하 고 원사 지원 반 1 년,이 버전의 아파치 공개 사용자의 데이터의 처리에 더 큰 자신감을 제공할 것입니다. Milind Bhandarkar, 중추적인 회사의 수석 과학자는 말했다: "완전히 발표 기능 사용자가 이러한 사용자 지향 Api 및 원사 프로토콜 안정 하 고 Hadoop의 주요 버전의 다음 세대에 나타날 때까지 변경 되지 것입니다 수 있습니다 그것은 또한 응용 프로그램을 구축 하 고 이러한 Api를 사용 하 여 여전히 더 안심입니다.

원사 극적으로 변화 하고있다, 변경 하는 방법으로 Hadoop 컴퓨팅 구성 요소 (MapReduce) 분할 및 원사 두 개의 다른 부분으로 MapReduce의 추적 구성 요소를 인하 하기 때문에 작업을 처리: 리소스 관리자와 응용 프로그램 일정.
가 쉽게 HBase 같은 서비스 뿐만 아니라 동시에 MapReduce 또는 폭풍 같은 작업을 실행 하려면 데이터 마무리 도구에 대 한 있습니다. "그것은 다른 mapreduce 작업 지금 MapReduce, 리소스 공유에 더 효율적인" 더 그 커팅, Hadoop의 공동 설립자 말한다. 이러한 시스템 동적으로 리소스를 공유할 수 있습니다 지금 하 고 자원을 우선 또한 수 있습니다. "
Cuuting와 Bhandarkar이이 방법은 아파치 프로젝트에 의해 영향을 인정" Mesos "클러스터 관리 시스템 및 Google Borg와 오메가 비밀 프로젝트.
Bhandarkar 말한다: "나는 한 손으로 보/오메가 프레임 워크는 리소스 할당 및 자원 관리에 대 한 약간 낮은 수준의 프레임 워크 라고 해야 합니다." 다른 한편으로, 보 그/오메가 원사 보다 데이터 센터의 규모에 더 잘 할 수 있다. "어떤
원사 수 많은 데이터 기반 응용 프로그램 및 서비스, 실행 Hadoop은 더 네이티브 플랫폼 Hadoop을 설정 하는 기능을 하 고 전체 데이터 센터 운영 체제를 포함 하는 소프트웨어 생태계는 데이터 처리 시스템에서 Hadoop 시스템을 변환 하는 데 도움이" 절단이 했다. "원사 열립니다 Hadoop의 분산된 처리 능력을 수 있도록 더 많은 사용자 정의 및 확장성, MapReduce에 초점을 맞춘 초기 배포 보다" 제임스 워터스, 클라우드 파운드리 중추적인 회사를 말한다. 또 다른
Hadoop 2에 추가 된 기능은 HDFs 연맹 hdfs 클러스터 내에서 여러 네임 스페이스를 포함할 수 있습니다. 전반적으로, 서로 다른 응용 프로그램을 떠나와 단일 명명 된 노드 병목을 제거 하 여 파일 시스템 처리량을 개선 시스템의 가용성 증가.
절단 예측 Hadoop 밝은 미래를 해야한다 고 몇 년이 지났습니다 처음 노란 코끼리 초기 21 세기에 태어난 놀라울입니다.
지금 그것은 내가 상상 하지 않을 수 있는 응용 프로그램의 넓은 범위를 지 원하는 데이터 센터 운영 체제로 성장 했다. 그 오픈소스 Hadoop 기술 놓고 인기를 홍보 하는 가장 좋은 방법은 될 것입니다 확신 합니다.