【Spark】SparkSession基础

SparkSession = SparkContext + HiveContext + StreamingContext + SQLContext

val conf = new SparkConf().setMaster("master").setAppName("appName1")
val sc = new SparkContext(conf)  //或者val sc = new SparkContext("master","appName1")

SparkConf一旦被设置,就不能被修改,存储setting的事ConcurrentHashMap

发布了61 篇原创文章 · 获赞 2 · 访问量 7302

猜你喜欢

转载自blog.csdn.net/hebaojing/article/details/103898415
今日推荐