오픈 소스 클러스터 컴퓨팅 환경을 아파치 스파크

아파치 스파크 약어 스파크, 스파크는 오픈 소스 클러스터 컴퓨팅 Hadoop, 유사한 환경 하지만 그들, 몇 가지 차이가 있다 이며 이러한 유용한 차이 스파크 더 유리한 일부 작업 부하에서 즉, 스파크 메모리 배포 데이터 집합 활성화와 함께 그것은 대화형 쿼리를 제공 하는 반복 작업을 최적화할 수 있습니다.

아파치 스파크 스칼라를 사용 하 여 응용 프로그램 프레임 워크의 스칼라 언어에서 구현 됩니다. Hadoop, 달리 스파크와 스칼라 긴밀 하 게 통합 될 수 있다, 그리고 스칼라 분산된 데이터 집합을 로컬 컬렉션 개체로 쉽게 조작할 수 있습니다.

아파치 스파크 분산된 데이터 집합에 대해 반복 작업을 지원 하기 위해 만들어진 Hadoo 파일 시스템에서 동시에 실행할 수 있는 하 둡을 실제로 보완입니다. 이 동작은 Mesos 라는 타사 클러스터 프레임 워크에서 지원할 수 있다. 스파크는 큰, 낮은 대기 시간 데이터 분석 응용 프로그램을 빌드할 캘리포니아 대학교-버클리 앰프 연구소 (알고리즘, 컴퓨터, 그리고 사람 연구소)에 의해 개발 된다.