zoukankan      html  css  js  c++  java
  • spark未来的发展方向

              spark是採用scala语言开发的基于内存的计算框架,作者Matei Zaharia,在未来的发展方向:

    1、spark streaming:提高spark的流处理能力,使得spark更适于通过一套代码进行大数据流处理和批量计算;

    2、MLlib:spark0.8增加了MLlib,下一步会在MLlib中增加很多其它的机器学习算法,使得spark更适于分布式机器学习;

    3、GraphX:是基于spark的图计算框架,当前非常多社交网络分析,机器学习和图的相关算法终于完毕推荐系统的工作,终于想达到让用户仅仅通过几行简单的

                            代码可以实现图算法;

    4、稳定性:与用户和开源社区合作,部署在多种应用场景下,包含ETL、SQL、机器学习、图分析等,使其更加稳定;

    5、易用性:继续完好spark的python/java API,同一时候使其安装部署更加方便。

    努力将spark打造成大数据时代的智能手机。

  • 相关阅读:
    [Re] Spring-4(SourceCode)
    [Re] Spring-3(JdbcTemplate)
    [Re] Spring-2(IOC+AOP)
    [Re] Spring-1(bean)
    08-MyBatis(2)
    08-传输层(7)
    07-传输层(6)
    06-传输层(5)
    05-传输层(4)
    ALS推荐算法
  • 原文地址:https://www.cnblogs.com/mfrbuaa/p/4033661.html
Copyright © 2011-2022 走看看