zoukankan      html  css  js  c++  java
  • Hadoop学习小结

    还在学校的时候,就知道Hadoop的存在了。

    2012年在公司实习的时候,买了《Hadoop权威指南第2版》,大致看了下。

    今年,抽空也大致喵了几眼。

    最大的感悟就是:光看不做,还是不行。

    Hadoop最坑最脑残的地方就是,默认不支持在Windows下运行。我的笔记本用的是Windows7系统。

    这样,只好安装了VMware,然后安装Ubuntu系统,想通过这种方式来搭建环境。

     

    Hadoop这个大数据处理框架包含了好多内容,MapReduce,HDFS等等。我现在只有个模糊的理解,想通过写代码,再反复看书和看文档的方式,来加深对Hadoop等云计算概念和技术的理解。

    我觉得未来,云计算/大数据处理技术将会变得非常平常,就像今天使用Java开发一样。

    IT技术实在是太多了,现在真心学得有点累了,不断思考和实践,IT技术之路要怎么搞。

    本周,参加了Oracle Endeca的培训。培训老师说,用Oracle的一些技术,根本不用考虑什么大数据,把一切东西都加入到内存中,现在已经有32T的内存了,你敢信。

    我觉得这些话也是有道理的,如果不考虑金钱和成本,确实不一定要什么云计算框架。

    现实是,32T内存性价比太低,仍然有极限,普通企业不敢用,大型企业不能用(大型企业数据量太大了)。

    原文链接http://blog.fansunion.cn/articles/3404(小雷博客-blog.fansunion.cn)

  • 相关阅读:
    $router和$route的区别
    提莫攻击
    paste命令
    数组中的第K个最大元素
    od命令
    被围绕的区域
    不用虚机不用Docker使用Azure应用服务部署ASP.NET Core程序
    面试官:对象可能会迟到,但它永远不会缺席
    Kubernetes 的层级命名空间介绍
    每日一道 LeetCode (21):对称二叉树
  • 原文地址:https://www.cnblogs.com/qitian1/p/6463388.html
Copyright © 2011-2022 走看看