zoukankan      html  css  js  c++  java
  • 大数据技术的机遇与挑战

    举例几个典型的大数据平台:
    1、世界客流路线图
    2、气象云图
    3、邮件网络
    4、微博传播
    5、话单
    这里每个平台每3小时的数据都能达到T级数据量


    21世纪是信息化爆炸的时代:
    搜索引擎 谷歌/百度
    社交网络 QQ,facebook
    电子商务 淘宝,京东
    互联网电视 乐视/小米
    游戏
    移动互联网 微信/微博
    这里每个平台的数据传播速度很快,体量很大


    社会化趋势:
    UGC 用户生成的信息(用户行为 / 用户关系 / 大量碎片化信息)


    综上所属那么什么才算是大数据呢?这里记得4个V
    1、体量大 volume
    2、多样性 variety
    3、价值密度低 value
    4、速度 velocity


    大数据的挑战:
    1、对现有数据库的挑战
    2、数据的多样性挑战
    3、数据实时性的挑战
    4、网络架构 数据中心、运维挑战
    5、信息安全的挑战(斯诺登事件)


    大数据的机遇:
    分析技术 数据预处理 统计和分析 数据挖掘
    大数据技术 数据采集 数据存储(关系型/NOSQL)


    处理大数据的心得:
    大数据的价值正在被挖掘出来
    数据再大没有价值也是垃圾
    大数据里挖掘有价值的信息才是王道
    深度挖掘,精准营销与预测


    最后举个例子:
    有人说房子太多有很多鬼城出现,有人说房子根本没有的卖,那到底谁在说谎话呢,
    管理局相关人员可以不用到现场调查,只需要分别调查下某个大楼的电力,水力
    的使用量就可以做个预测,那么这个就是深度挖掘精准预测的方法

  • 相关阅读:
    PHP操作Mysql
    python基础篇-爬虫urlparse使用及简单示例
    Mysql 返回JSON值属性的函数 (五)
    Mysql Json函数之更新 (四)
    Mysql Json函数之搜索 (三)
    Mysql Json函数创建 (二)
    Mysql Json函数总览 (一)
    Java8-Consumer、Supplier、Predicate和Function方法总结
    RPC原理及RPC实例分析(转)
    软件版本GA、Beta、RC含义
  • 原文地址:https://www.cnblogs.com/lovekingly/p/3963067.html
Copyright © 2011-2022 走看看