4040:每个Driver的SparkContext都会启动一个web节目,默认端口是4040
18080: 启动历史服务器: ./sbin/start-history-server.sh , 日志跟目录必须在
spark.history.fs.logDirectory中配置,每个子目录对应一个Spark程序的事件日志。
历史服务会启动web节目,默认端口 18080
4040:每个Driver的SparkContext都会启动一个web节目,默认端口是4040
18080: 启动历史服务器: ./sbin/start-history-server.sh , 日志跟目录必须在
spark.history.fs.logDirectory中配置,每个子目录对应一个Spark程序的事件日志。
历史服务会启动web节目,默认端口 18080