zoukankan      html  css  js  c++  java
  • 【2019/7/23】暑假自学——周进度报告2

      本周报告延迟了两天。


      这周因为考驾照学习时间较少,主要只是完成了Hadoop系列环境的安装。

      Hadoop作为跨平台的分布式架构,基于java语言,最合适和运行环境是Linux系统,所以我的电脑需要安装虚拟机、给虚拟机安装java来完成环境搭建。

      

      先简单安装了下虚拟机,我采用Ubuntu桌面版18.04.2版本,这样也可以很方便的可视化操作。

      

      之后添加了一个hadoop名称的用户用来运行程序。(已经添加入sudo列表内)

      

      安装好java的jre和jdk就没问题了(默认居然是java11),下一步开始配置ssh登录。

      安装了ssh-server后,生成空密码的sshkey,id_rsa.pub文件追加到本机authorized_keys中,实现了ssh的无密码登录。

      

      下面就是安装Hadoop-3.2.0(不清楚是否会用问题),只需要下载然后解压就可以。

      

      运行发现没有问题。

      


      到此安装就告一段落,另外就可以选择分布式或者伪分布式安装,作为模拟器我只能试试伪分布式,所以在下个星期我会尝试使用Hadoop的Hbase来开发一个小系统,闲下来了就应该多学习。

  • 相关阅读:
    EM算法
    最大熵模型中的对数似然函数的解释
    PySpark 自定义函数 UDF
    PySpark 自定义聚合函数 UDAF
    Numpy总结
    Examples
    Examples
    Examples
    Examples
    Examples
  • 原文地址:https://www.cnblogs.com/limitCM/p/11234128.html
Copyright © 2011-2022 走看看