版本:
zeppelin=Apache Depelin0.9.0-preview1
CDH=CDH6.2.0
Flink=Flink1.9.0
一、问题
flink basic 官方示例任务 Batch WordCount 执行报错
二、解决
cd $ZEPPELIN_HOME/conf
vim zeppelin-env.sh
#添加或修改,内容如下
export FLINK_HOME=/opt/cloudera/parcels/FLINK
1.打开界面,点击右上角
2.点击Interpreter,找到flink
3.修改红框内参数
4.找到刚才执行报错的Flink Basic界面,点击右上角小齿轮
5.点击刷新按钮,刷新flink interpreter,再点击save保存。
再次点击执行,发现报错变了:
java.lang.RuntimeException: org.apache.thrift.TApplicationException: Internal error processing createInterpreter
这个报错的原因猜测是zeppelin0.9.0-preview1提供的 flink intercepter 版本和我集群上的不一样。
修改思路(待验证),等有空挨个试试
1.更换flink版本为官方要求的Apache Flink 1.10.1 for Scala 2.11
2.编译源码指定flink1.9.0,spark2.4
mvn -X clean package -DskipTests -Pspark-2.4 -Dflink.version=1.9.0 -Pscala-2.11 -Dhadoop.version=3.0.0-cdh6.2.0