zeppelin官网定义为:数据摄取、数据分析、数据可视化的前端notebook工具,配置使用比较简单,本次直接配置在CDH环境上,使用zeppelin-0.7.3版本,鉴于zeppelin-0.8.1版本配置后sparkinterper无法使用(尚未解决);
1、下载安装包,解压;
2、修改配置文件:需要修改~/zeppelin-0.7.3-bin-all/conf路径下的zeppelin-site.xml和zeppelin-env.sh文件,若要配置用户及对应权限,需要修改shiro.ini文件;
① zeppelin-site.xml文件中修改服务端口;
② zeppelin-env.sh文件添加如下配置;
export HIVE_HOME=/opt/cloudera/parcels/CDH-5.14.4-1.cdh5.14.4.p0.3/lib/hive
export JAVA_HOME=/home/csap/jdk1.8.0_144
export DEFAULT_HADOOP_HOME=/opt/cloudera/parcels/CDH-5.14.4-1.cdh5.14.4.p0.3/lib/hadoop
export SPARK_HOME=/opt/cloudera/parcels/SPARK2/lib/spark2
export HADOOP_HOME=/opt/cloudera/parcels/CDH-5.14.4-1.cdh5.14.4.p0.3/lib/hadoop
export SPARK_HOME=/opt/cloudera/parcels/SPARK2/lib/spark2
export HADOOP_CONF_DIR=/etc/hadoop/conf
export ZEPPELIN_JAVA_OPTS="-Dmaster=yarn-client -Dspark.yarn.jar=/home/csap/zeppelin-0.7.3-bin-all/interpreter/spark/zeppelin-spark_2.11-0.7.3.jar"
export MASTER=yarn-client
if [ -n "$HADOOP_HOME" ]; then
export LD_LIBRARY_PATH=$LD_LIBRARY_PATH:${HADOOP_HOME}/lib/native
fi
3、启动测试: bin目录下,nohup ./zeppelin.sh start && ,并打开配置的服务端口;
python解释器测试:
spark解释器测试:
扫描二维码关注公众号,回复:
10783342 查看本文章