데이터엔지니어링3 master, worker 실행 on Window spark-class org.apache.spark.deploy.master.Master spark-class org.apache.spark.deploy.worker.Worker spark://14.47.240.183:7077--> spark url은 마스터 로그 혹은 웹 화면에서 확인 2025. 6. 27. RStudio spark 개발 설정 SPARK_HOME_DIR Sys.setenv(SPARK_HOME = SPARK_HOME_DIR) .libPaths(c(file.path(Sys.getenv("SPARK_HOME"), "R", "lib"), .libPaths())) library(SparkR) spark 2025. 6. 27. spark-shell 실행시 에러 처리 - on window ----------------------------------------------------------------------------------------------------------------------scala> :q 25/06/26 13:31:23 ERROR ShutdownHookManager: Exception while deleting Spark temp dir: C:\Users\Samsung\AppData\Local\Temp\spark-867da44d-544f-4c21-9d23-8d0fb935d2e5\repl-0addcc97-04ab-4b33-bec6-5aed5f7caa93 java.io.IOException: Failed to delete: C:\Users\Samsung\AppData.. 2025. 6. 26. 이전 1 다음
