본문 바로가기
파이썬

파이썬 PySpark에서 스크립트를 실행하는 방법

by º기록 2020. 10. 28.
반응형

pyspark 환경에서 스크립트를 실행하려고하는데 지금까지 할 수 없었습니다. python script.py와 같은 스크립트를 pyspark에서 어떻게 실행할 수 있습니까? 감사

 

해결 방법

 

할 수 있습니다 : ./ bin / spark-submit mypythonfile.py

pyspark 를 통한 Python 애플리케이션 실행은 Spark 2.0부터 지원되지 않습니다.

 

참조 페이지 https://stackoverflow.com/questions/40028919

 

 

반응형

댓글