큰 데이터의 언어 및 데이터 압축 비율에

만약 당신이 Twritter에 대 한이 문서를 읽고 궁금해 "트위터 일반 선거에 대처 방법을 참조: 덜 루비와 더 많은 자바."

관심 있는 친구 들 모습에 대 한 검색 갈 수 있습니다.

오바마 롬니 선거 당일, 트위터 서버 분당 처리의 수입니다. 327,452 트위터에 사람들이 31 백만 선거 관련 콘텐츠 그 날 동안 게시 Twitter 트래픽을 급증, 초당 한 지점 15,107에서. 인터넷 세계에서 그것은 오바마 정말 성공 하지, 그것은 트위터, 트위터 중단 없는이 시간 때문에.

"의 일환으로 우리는 서버를 다시 구성 루비 마이그레이션 및 모바일 클라이언트의 접근을 피하기 위해 루비 스택 병행 자바 가상 기계 스택을 통해 갈 것 이라고" Rawashdeh, "이러한 부하를 견딜 수는 트위터에 자바와 루비를 다시 쓰기 덕분에 Railstwitter입니다. 처음에는 회사에 반대 되었다 자바, 스칼라, 지원 그리고 트위터 자바와 스칼라를 결합 하는 오늘.

Hadoop, 대용량 데이터의 오픈 프레임에 거 대 한 짐승은 측정 하기 어렵다입니다. 그것은 또한 자바 개발에 기반.

BI 제품 시리즈의 개발과 연구는 또한 자바 기반, 외국 국가에서 경쟁자는 cognos, 보 및 Biee 일반적으로. 고객 선택의 경험에서 고객 우리의 두 큰 무기 꽤 칭찬 하는 경향이 있다: 첫째, 높은-성능 컴퓨팅, 두 번째는 데이터 시각화의 데이터. 이 두 가지 측면에서 저자는 개인적으로 벽돌 쌓아, 그래서 또한 말: 어린이 신발의 대용량 데이터를 처리 하는 자바를 사용 하 여 준비 하시기 바랍니다 안심 걸릴.

나는 종종 네트워크의 작품에서 어린이 신발 있다 대량 데이터 처리, 대규모 데이터 계산 자바를 사용할 수 없습니다, 당신은 C 또는 C를 사용을 참조 하십시오. 한 번에 웃음만. 대부분의 시간, 논쟁은 표준 대답이 있기 때문에 완전히 의미가 없다.

종종 데이터 압축 비율, 압축 하기 보다 1/10, 디스크 90% 등등 말 데이터 웨어하우스 제품의 수를 참조 하십시오.

저자 생각 MPP 노드 간의 데이터 전송에 대 한 포괄적인 네트워크 대역폭 수 있습니다 더 많은 무 자 비 한 데이터 압축, 필요 또한 없는 것 보다 더 많은 저장, 그것은 중요 하지 않은 너무.

이제 표준 PC 디스크는 TB, 디스크 저장 유용 하지 않습니다, 부작용이 있을 수 있습니다. 분석은 다음과 같습니다.

대규모 데이터 계산 요청을 처리할 때 일반 메모리에 데이터를 로드 해야 하는 경우는 압축, 계산을 수행 하기 위해 메모리에 데이터를 확장 하는 데 필요한. 일반 개발자는 확장 데이터는 자주 메모리 요청 및 자료, 쉽게 원인 감압은 대부분 CPU 소모 과정 동안.

따라서 때 고려할 수 있는 측정 데이터 웨어하우스 또는 데이터 마트 제품, 디스크 저장 더 중요 한 것입니다 그것은 메모리, CPU, 시간 절약의 주 고려.

좋은 제품, 것 생략 하거나 데이터 확장 프로세스 최적화는 더 나은 메모리 디자인 될이 과정 귀착되 지 않는다 자주 메모리 요청 및 자료, 높은-성능 고려 사항에 따라, 그것은 디스크 데이터를 로드 하거나 메모리 CPU 부하에 빠른 응답에 대 한 데이터를 삭제 하는 효율적인 방법을 선택 가능한 CPU 계산을 저장, 대규모 데이터 실시간 계산 될 것입니다.

따라서, 데이터 웨어하우스 또는 양방향 제품을 측정할 때 그것 디스크, 메모리 및 CPU 구성의 시리즈에 따라 그것을 테스트 하 고 좋습니다.