zoukankan      html  css  js  c++  java
  • Hadoop学习小结

    还在学校的时候,就知道Hadoop的存在了。

    2012年在公司实习的时候,买了《Hadoop权威指南第2版》,大致看了下。

    今年,抽空也大致喵了几眼。

    最大的感悟就是:光看不做,还是不行。

    Hadoop最坑最脑残的地方就是,默认不支持在Windows下运行。我的笔记本用的是Windows7系统。

    这样,只好安装了VMware,然后安装Ubuntu系统,想通过这种方式来搭建环境。

     

    Hadoop这个大数据处理框架包含了好多内容,MapReduce,HDFS等等。我现在只有个模糊的理解,想通过写代码,再反复看书和看文档的方式,来加深对Hadoop等云计算概念和技术的理解。

    我觉得未来,云计算/大数据处理技术将会变得非常平常,就像今天使用Java开发一样。

    IT技术实在是太多了,现在真心学得有点累了,不断思考和实践,IT技术之路要怎么搞。

    本周,参加了Oracle Endeca的培训。培训老师说,用Oracle的一些技术,根本不用考虑什么大数据,把一切东西都加入到内存中,现在已经有32T的内存了,你敢信。

    我觉得这些话也是有道理的,如果不考虑金钱和成本,确实不一定要什么云计算框架。

    现实是,32T内存性价比太低,仍然有极限,普通企业不敢用,大型企业不能用(大型企业数据量太大了)。

    原文链接http://blog.fansunion.cn/articles/3404(小雷博客-blog.fansunion.cn)

  • 相关阅读:
    拟阵学习笔记
    HNOI 2016 解题报告
    HNOI 2015 解题报告
    一类动态规划问题状态的简化
    组合数学学习笔记
    简单多项式学习笔记
    基础线代学习笔记
    后缀数据结构学习笔记
    图论学习笔记
    AT3673 [ARC085D] NRE 题解
  • 原文地址:https://www.cnblogs.com/qitian1/p/6463388.html
Copyright © 2011-2022 走看看