zoukankan      html  css  js  c++  java
  • 安装zeppelin

    安装zeppelin
    
    1.默认安装好spark集群
    2.安装zeppelin
    	1.解压安装包
    		tar zxvf zeppelin-0.5.5-incubating-bin-all.tgz
    	2.配置环境变量
    		vim /etc/profile
    		
    		#zeppelin
    		export ZEPPELIN_HOME=/opt/zeppelin-0.5.5
    		
    		#CLASSPATH
    		export CLASSPATH=$CLASSPATH:$ZEPPELIN_HOME/lib
    		
    		#PATH
    		export PATH=$PATH:$ZEPPELIN_HOME/bin
    		
    		保存退出
    		
    		source /etc/profile
    	3.修改配置文件
    	    cd /opt/zeppelin-0.5.5
    		
    		1.根据模板复制相关配置文件
    			cp zeppelin-env.sh.template zeppelin-env.sh
    			cp zeppelin-site.xml.template zeppelin-site.xml
    		2.创建相关目录
    			mkdir /opt/zeppelin-0.5.5/logs
    			mkdir /opt/zeppelin-0.5.5/tmp
    		3.修改配置文件参数
    		
    			####zeppelin-env.sh####
    			export JAVA_HOME=/usr/java/jdk1.8.0_65
    			export HADOOP_CONF_DIR=/opt/hadoop-2.5.2/etc/hadoop   //如果需要读取hdfs的文件  则必须配置此条
    
    			export MASTER=spark://hadoop.master:7077      //使用spark 集群模式
    			export SPARK_HOME=/opt/spark-1.6.0
    			export SPARK_SUBMIT_OPTIONS="--driver-memory 500M --executor-memory 500m"   //可以根据实际内存情况进行调整
    
    			export ZEPPELIN_JAVA_OPTS="-Dspark.executor.memory=500m -Dspark.cores.max=1"  //可以根据实际内存情况进行调整
    			export ZEPPELIN_MEM="-Xmx500m -XX:MaxPermSize=500m"     //可以根据实际内存情况进行调整
    			export ZEPPELIN_LOG_DIR=/opt/zeppelin-0.5.6/logs
    			
    			
    			####zeppelin-site.xml####
    			<property>
    			  <name>zeppelin.server.addr</name>
    			  <value>hadoop.slaver3</value>			//主机名或Ip  当前主机
    			  <description>Server address</description>
    			</property>
    
    			<property>
    			  <name>zeppelin.server.port</name>
    			  <value>8084</value>                        //不一定非要一致  但这个端口是通过web访问的端口
    			  <description>Server port.</description>
    			</property>
    			
    		4.启动
    			zeppelin-daemon.sh start
    		5.验证
    			主机名:端口    //能显示界面则表示安装成功
    			
    

      

  • 相关阅读:
    使用 python 实现 memcached 的启动服务脚本 rc
    iNeedle系统之国舜项目
    CentOS系统在不重启的情况下为虚拟机添加新硬盘
    Windows下常用软件工具的命令
    dpdk在虚拟机上出错处理
    Linux工具之man手册彩色页设置
    使用VIM插件ctags来阅读C代码
    Linux命令行上传文件到百度网盘
    ng-repeat 的重复问题
    python 启动简单web服务器
  • 原文地址:https://www.cnblogs.com/ciade/p/5215758.html
Copyright © 2011-2022 走看看