처음부터 큰 데이터 플랫폼 구축 "크로스-국경"를 재생 하는 디즈니

의심의 여지가 그 디즈니는 거 대 한 엔터테인먼트 회사는 보이지만 큰 데이터 플랫폼에 관해서, 엔터테인먼트 거 대 한 시작에 가깝다. 많은 중소 기업에는 강한 것입니다 그리고 특별 한 지혜, 작은 팀, 하 둡, NoSQL 데이터베이스 및 기타 오픈 소스 기술을 사용 하 여 만들 수 있습니다 완전히 독특한 대형 데이터 플랫폼. 여부 결과 더 나은 또는 더 나쁜, 같은 큰 회사는 큰 데이터 영역으로 이동이 "놀이"의 완전히 다른 규칙은 의미.

아 룬 야 곱, 디즈니 빅 데이터 기술 및 서비스 솔루션 팀의 머리는 보스턴의 IE 그룹에서 목요일 큰 데이터 이노베이션 서밋에서 디즈니의 큰 데이터 플랫폼 도입. 다른 회사와 달리 디즈니는 처음부터, 소프트웨어 공급 업체에서 대형 데이터 플랫폼을 구축 하기로 했다. 높은 비용이 중요 한 요소가 있지만, 키 최종 결정의 근본 원인이 유연성의 질문 이다.

감소, 재사용, 재활용

회사에 가장 큰 가치를가지고 보장 하기 위해 디즈니 큰 데이터 플랫폼 응축 각 직원의 근 면 한 노력, 그것은 모두 다, 이것은 강력한 작업. 처음에 야 곱이 말했다, "우리는 작은 자문 기관으로 서 스스로의 생각 뭔가 판매 하는 그냥." "하지만 제이콥 부서 특정 기능을 개발 하는 플랫폼을 사용 하려고 할 때 즉시 역할을."

구조적으로,이 플랫폼 및 구성 요소를 특정 목적을 통해 경로 데이터를 리팩터링할 수 있습니다 또는 쉽게 구성 요소를 대체할 수 있는 경우. 디즈니 빅 데이터 플랫폼 Hadoop, 카산드라, MongoDB에 따라 개발 된다. 운영 팀이 플랫폼을 사용 하 여 보고, 분석, 오류 메시지, 색인 하 수 그리고 높은 처리량, 분석 팀은 그들이 필요로 하는 높은 대기 시간 데이터에 액세스 하는 동안 필요한 낮은 지연 시간 데이터 액세스 응용 프로그램 개발자가 얻을 수 있습니다.

그러나, 야 곱 또한 오픈 소스 소프트웨어의 집합을 사용 하 여 비용을 절감 하 고 싶어, 하는 동안 그는 과시, 감당할 수 있는 고급 예산 대부분 신생 플레이-아웃소싱 및 예약 되지 않은 새로운 제품을 필요가 없습니다. 필요로 할 때 그는 Hadoop 클러스터의 지원, 그는 Cloudera 호출할 수 있습니다. Solandra (오픈 소스 검색 엔진 SOLR 카산드라에 기반)을 배포 하는 데 필요한 때에, 그는 완전히 카산드라 제품에 따라 DataStax의 엔터프라이즈 버전을 구입할 수 있습니다 하지만 그는 하지 않았다.

유연성은 무료

Solandra 이벤트는 실제로 무게 무료 오픈 소스 소프트웨어를 사용 하는 필요 의미 합니다. "늦은 밤에 오픈 소스 프로젝트에서 작업할 수 있습니다, 그들을 실행 하는 것을 배울 수 있습니다 하지만 그 어떤 이해가 되지 않습니다." "야 곱 그 시간과 에너지를 헌신 하고자 하는 경우 이러한 것 들 극복 될 수 있다 완전히 말한다."

하지만 극복할 수 있는 디즈니 규모 기업에 대 한 더 많은 문제가 있다. 야 곱은 그 동안 배포 프로세스는 내결함성, 고가용성 및 보안 그것의 자신의 방법으로 해결할 수 있습니다, 그것은 궁극적으로 찾이 필요가 이러한 것 들을 구현 하는 방법을 말한다.

대 중 최고

시스템은 모든 사람들이 사용할 수 있는 오픈 소스 소프트웨어에 건축 될 수 있다, 그러나 그것은 또한 충분 한 프레임 워크는 확장 가능 하 고 안정적인 시스템을 구축 하지 않습니다 및 시스템 종류의 수천 및 사내 개발자의 요구를 충족 해야 합니다 의미 합니다. 야 곱 Hadoop 1 개월에 대 한 학습과 다음 배포 큰 데이터 플랫폼을 사용 하 여 시작 6 명이 함께 시작에 대 한 쉬울 것 이라고 말했다. 하지만 큰 사업에 대 한이 가능 절대적으로 하지 않습니다.

그의 팀 배포를 쉽게

기업 사용자가 시스템에 데이터를 로드할 수 없습니다 변명을 제거, 그들은 사용자 정의 인터페이스 파일을 가리키도록 필요. 야 곱 말했다는 디즈니의 데이터 플랫폼, 비록 하루 데이터의 5 TB 극적으로, 하지만 여전히 많은 다른 종류의 데이터 저장 될 필요가 있다. 그들은 기술을 캡슐화 했습니다, 때문에 제이콥의 팀 Hadoop 및 MongoDB, 분석 및 쿼리의 단지 부분에 대해 많이 얘기 하지 않았어요. 데이터 플랫폼 프로그래밍 언어의 많은 종류를 사용 하 여 개발자 플랫폼 restful API 호출을 작성할 필요 없이 작용할 수 있으므로 클라이언트의 프레임 구조를 구축.

그러나, 모든 준비를 하 고, 야 곱 디즈니의 큰 데이터 플랫폼에 그의 에너지를 정 진 하 시작과 야 곱 다른 데이터 플랫폼 프로세스의 중복을 원하지 않았다. 빅 데이터 관리를 위한 도구는 점점 더로 야 곱 그는 여전히 분석, 건물 새로운 도구는 도구를 구입 그리고 아직도 시간 변경을 말한다. 그러나 그것은 좋은 선택의 여지가 있을 때 사용자 지정 도구를 구축, 그것 아니다 항상 수많은 시간과 노력을 저장할 준비가 뭔가 구입 하는 것이 현명.

다음은 그냥 발췌 PDF, 디즈니의 큰 데이터 플랫폼에 대 한 더 기술적인 세부 사항는 최근 카산드라 정상에서 야 곱에 의해 제공 된 PDF 문서를 다운로드 하려면 클릭할 수 있지만 데이터의 기밀성을 제공 하기 때문에 링크 제거 되었습니다 불행히도, 수 있도록 희망:

디즈니 역할에 큰 데이터:

데이터 관리 플랫폼:

데이터 관리 플랫폼 목표:

수집, 검색, 응용 프로그램 데이터 분석:

사용 사례의 진화:

추천 엔진:

포스트 스크립트: 디즈니는 월트 디즈니 회사, 그것의 설립자, 월트 디즈니의 이름을 따서로 알려진된 모든, 엔터테인먼트 제작, 테마 파크, 장난감, 책, 비디오 게임 및 미디어 네트워크를 포함 하는 버 뱅크에 본사를 둔 큰 다국적 기업 이다. 픽 사 애니메이션 스튜디오 (픽 사 애니메이션 스튜디오), 마블 코믹스 (마블 엔터테인먼트 Inc.), 시금석 스튜디오 (시금석 사진), 미 라 맥스 (미 라 맥스) 영화 회사, 뷰에 나 비스타 홈 엔터테인먼트, 할리우드 스튜디오 (할리우드 사진), ESPN 스포츠, ABC는 그것의 모든 기업 (브랜드 이름)입니다.

문서, 디즈니의 정보에 대 한 실습 문의 대 한 필요성 때문에 오늘 심장도 비교할 수 없는 충격 디즈니의 대부분의 사람들이 생각 아마도 영화 애니메이션 회사, 좀 더 단어를 생각, 홍콩 디즈니랜드, 내가 생각 수 있습니다 당신은 할리우드 영화 회사, 심장 강한 충격을 있을 것입니다. 구름의 도래와 함께 뜨거운 되고있다 컴퓨팅, 빅 데이터, 클라우드 컴퓨팅의 가장 중요 한 구성 요소 중 하나로 서, 큰 데이터 더 지 고 더 많은 관심, 오늘 디즈니 또한 재생 "크로스-국경", 큰 데이터 영역을 입력 하기 시작 했다. 하지만 클라우드 컴퓨팅 하 고 영화 산업으로 연결 됩니다 일찍, Oscar 지명 픽 사 영화의 3D 영화 "토이 스토리 3"는 정말 절묘 한 클라우드 컴퓨팅을 감사. 꿈의 공장, 쿵푸 팬더 2, 중국 관객에 게 친숙 한의 소유자 클라우드 컴퓨팅 2003 년에서으로 이동 되었습니다. 클라우드 컴퓨팅 플랫폼을 제공 하는 생산, 저장, 및 많은 영화 및 텔레비전 프로덕션, 그리고이 영화를 만드는 데 필요한 컴퓨팅 리소스를 제공에 중요 한 역할. 우리는 또한 새로운 플랫폼에 빛나는 디즈니를 기대 합니다. (컴파일/왕 펭, revisers/바오)

(책임 편집기: 루 광)