티스토리 뷰

공부

[java] jdk & spark submit

승가비 2023. 1. 15. 01:33
728x90
JAVA_HOME=/usr/lib/jvm/java-11-amazon-corretto.x86_64 && spark-submit ...

https://brocess.tistory.com/176

 

[ Spark ] 스파크 jdk버전 바꿔서 실행하기

현상황 : Cloudera(클라우데라) 버전(CDH 5.5.1, Parcel), Spark버전(1.5) - jdk version 1.7필요상황 : 기존 작업을 Spark1.5(jdk1.7) - jdk 1.8로 돌리기준비상황 : 클러스터의 각 노드들에 jdk1.8이 설치되어 있어야 함.

brocess.tistory.com

 

728x90
저작자표시 비영리

'공부' 카테고리의 다른 글

[python] croniter  (0) 2023.01.16
[ansible] pip3 install ansible  (0) 2023.01.15
[java] java.lang.IllegalArgumentException: Illegal character in scheme at index 0: localhost ` "s3://...".trim()`  (0) 2023.01.15
[aws] aws emr create-cluster  (0) 2023.01.14
[python] read file  (0) 2023.01.13
댓글