zoukankan      html  css  js  c++  java
  • Zeppelin的入门使用系列之使用Zeppelin运行shell命令(二)

      不多说,直接上干货!

      前期博客

    Zeppelin的入门使用系列之创建新的Notebook(一)

      接下来,我将以ml-100k数据集,示范如何使用Spark SQL进行数据分析与数据可视化

     

      因为

     

    [hadoop@master zeppelin]$ pwd
    /home/hadoop/data/zeppelin
    [hadoop@master zeppelin]$ ll
    total 4812
    -rw-rw-r-- 1 hadoop hadoop 4924029 Sep  2 11:00 ml-100k.zip
    [hadoop@master zeppelin]$ unzip ml-100k.zip
    Archive:  ml-100k.zip
       creating: ml-100k/
      inflating: ml-100k/allbut.pl       
      inflating: ml-100k/mku.sh          
      inflating: ml-100k/README          
      inflating: ml-100k/u.data          
      inflating: ml-100k/u.genre         
      inflating: ml-100k/u.info          
      inflating: ml-100k/u.item          
      inflating: ml-100k/u.occupation    
      inflating: ml-100k/u.user          
      inflating: ml-100k/u1.base         
      inflating: ml-100k/u1.test         
      inflating: ml-100k/u2.base         
      inflating: ml-100k/u2.test         
      inflating: ml-100k/u3.base         
      inflating: ml-100k/u3.test         
      inflating: ml-100k/u4.base         
      inflating: ml-100k/u4.test         
      inflating: ml-100k/u5.base         
      inflating: ml-100k/u5.test         
      inflating: ml-100k/ua.base         
      inflating: ml-100k/ua.test         
      inflating: ml-100k/ub.base         
      inflating: ml-100k/ub.test         

    [hadoop@master zeppelin]$ pwd
    /home/hadoop/data/zeppelin
    [hadoop@master zeppelin]$ ll
    total 4816
    drwxr-x--- 2 hadoop hadoop    4096 Jan 30  2016 ml-100k
    -rw-rw-r-- 1 hadoop hadoop 4924029 Sep  2 11:00 ml-100k.zip
    [hadoop@master zeppelin]$ rm ml-100k.zip 
    [hadoop@master zeppelin]$ 

       得到

    列出ml-100k文件列表

      然后,在ml-100k  Notebook新的段落中输入命令,如下

    %sh 
    ls -l /home/hadoop/data/zeppelin/ml-100k

       Zeppelin支持shell命令,就好像在终端输入命令一样。要输入shell命令,先输入%sh。

      按Enter键后再输入命令。%sh主要功能是告诉Zeppelin的解释器(Interpreter),后续要输入的是shell命令。

       也许,有些博友,会出现如下的错误

    查看u.user

    %sh
    head /home/hadoop/data/zeppelin/ml-100k/u.user

      运行后会显示u.user数据。字段是序号、年龄、职业、邮政编码。

      

       也有博友可能,会出现这个问题

      

  • 相关阅读:
    数据库连接代码
    智能家居资源汇总
    android应用设计与实现相关资源汇总
    嵌入式设计应用资料汇总,不定时更新中……
    Zigbee相关资料大全,不断更新中……
    H.264视频编码资料汇总,不断更新……
    星网锐捷笔试
    华为 10第二题 成都 约瑟夫环
    2014华为校园招聘上机测试题目(华科提前批)
    2014年华为校招成渝地区上机试题
  • 原文地址:https://www.cnblogs.com/zlslch/p/7465979.html
Copyright © 2011-2022 走看看