zoukankan      html  css  js  c++  java
  • Zeppelin的入门使用系列之使用Zeppelin运行shell命令(二)

      不多说,直接上干货!

      前期博客

    Zeppelin的入门使用系列之创建新的Notebook(一)

      接下来,我将以ml-100k数据集,示范如何使用Spark SQL进行数据分析与数据可视化

     

      因为

     

    [hadoop@master zeppelin]$ pwd
    /home/hadoop/data/zeppelin
    [hadoop@master zeppelin]$ ll
    total 4812
    -rw-rw-r-- 1 hadoop hadoop 4924029 Sep  2 11:00 ml-100k.zip
    [hadoop@master zeppelin]$ unzip ml-100k.zip
    Archive:  ml-100k.zip
       creating: ml-100k/
      inflating: ml-100k/allbut.pl       
      inflating: ml-100k/mku.sh          
      inflating: ml-100k/README          
      inflating: ml-100k/u.data          
      inflating: ml-100k/u.genre         
      inflating: ml-100k/u.info          
      inflating: ml-100k/u.item          
      inflating: ml-100k/u.occupation    
      inflating: ml-100k/u.user          
      inflating: ml-100k/u1.base         
      inflating: ml-100k/u1.test         
      inflating: ml-100k/u2.base         
      inflating: ml-100k/u2.test         
      inflating: ml-100k/u3.base         
      inflating: ml-100k/u3.test         
      inflating: ml-100k/u4.base         
      inflating: ml-100k/u4.test         
      inflating: ml-100k/u5.base         
      inflating: ml-100k/u5.test         
      inflating: ml-100k/ua.base         
      inflating: ml-100k/ua.test         
      inflating: ml-100k/ub.base         
      inflating: ml-100k/ub.test         

    [hadoop@master zeppelin]$ pwd
    /home/hadoop/data/zeppelin
    [hadoop@master zeppelin]$ ll
    total 4816
    drwxr-x--- 2 hadoop hadoop    4096 Jan 30  2016 ml-100k
    -rw-rw-r-- 1 hadoop hadoop 4924029 Sep  2 11:00 ml-100k.zip
    [hadoop@master zeppelin]$ rm ml-100k.zip 
    [hadoop@master zeppelin]$ 

       得到

    列出ml-100k文件列表

      然后,在ml-100k  Notebook新的段落中输入命令,如下

    %sh 
    ls -l /home/hadoop/data/zeppelin/ml-100k

       Zeppelin支持shell命令,就好像在终端输入命令一样。要输入shell命令,先输入%sh。

      按Enter键后再输入命令。%sh主要功能是告诉Zeppelin的解释器(Interpreter),后续要输入的是shell命令。

       也许,有些博友,会出现如下的错误

    查看u.user

    %sh
    head /home/hadoop/data/zeppelin/ml-100k/u.user

      运行后会显示u.user数据。字段是序号、年龄、职业、邮政编码。

      

       也有博友可能,会出现这个问题

      

  • 相关阅读:
    easyUI的汇总列,在前端生成
    return返回两个三元表达式的和,返回不正确,同样要注意在JavaScript中,也是如此
    清除浮动有哪些方式?比较好的方式是哪一种?
    浏览器重置样式
    MUI框架的缩写输入
    会自动消失的提示信息
    JSON.stringify转化报错
    Jquery on方法绑定事件后执行多次
    属性索引选择元素
    字符串赋值数字时的问题
  • 原文地址:https://www.cnblogs.com/zlslch/p/7465979.html
Copyright © 2011-2022 走看看