불꽃-04 학습-클러스터 작업 SPARKSQLCLI 단일 노드 작업 및 원사

출처: 인터넷
작성자: 사용자
키워드: 스파크 단일 노드 실행 실행 Sparksql 원사 클러스터

1입니다. 실행 하는 단일 노드

빈/스파크-sql-spark://bigdata01.hzjs.co:7077-집행-메모리 40 g-총 실행자 코어 마스터 Spark.sql.warehouse.dir= hdfs://bigdata01.hzjs.co: 8020/사용자/sparksql-conf spark.driver.maxresultsize=4g

단점: 데이터 볼륨 특별 한 어셈블리 하면 죽을 클러스터 임무

2입니다. 클러스터 실행

빈/스파크-sql-원사-클라이언트-집행-메모리 80 g-conf spark.sql.warehouse.dir= hdfs://bigdata01.hzjs.co 마스터 : 8020/사용자/sparksql-conf spark.driver.maxresultsize=10g
관련 키워드 :
관련 문서

연락처

이 페이지의 내용은 인터넷에서 가져온 것이므로 Alibaba Cloud의 공식 의견이 아닙니다.이 페이지에서 언급 된 제품 및 서비스는 Alibaba Cloud와는 관련이 없으므로이 페이지의 내용이 골칫거리 인 경우 저희에게 알려주십시오. 우리는 5 일 근무일 이내에 이메일을 처리 할 것입니다.

커뮤니티에서 표절 사례를 발견한 경우 info-contact@alibabacloud.com 으로 관련 증거를 첨부하여 이메일을 보내주시기 바랍니다. 당사 직원이 영업일 기준 5일 내에 연락 드리도록 하겠습니다.

A Free Trial That Lets You Build Big!

Start building with 50+ products and up to 12 months usage for Elastic Compute Service

  • Sales Support

    1 on 1 presale consultation

  • After-Sales Support

    24/7 Technical Support 6 Free Tickets per Quarter Faster Response

  • Alibaba Cloud offers highly flexible support services tailored to meet your exact needs.