zoukankan      html  css  js  c++  java
  • 我对结构化和非结构数据的理解

            如今网上对大数据有结构化和非结构化的争论,前者如XML。后者象网页上的文字、图片、音视频等内容。孰优孰劣。在这里我不想去评论它。

    我想说的是,应该换一个角度来看待这个问题。就是说。不管这些数据不管它外在表象是什么,到了CPU、磁盘层面。它们都是一串数据流,或者称字节数组。

    假设让这些数据可以被计算机处理和产生价值,它的前提是必须可以被CPU理解和计算。所以。在这个概念基础上。我在Laxcus体系设计里,对数据採用的是一种可格式化(formatable)的处理方案。

    这个方法简单来说就是这样:数据进入磁盘和CPU前,它们首先做一个预处理,被拆解成CPU理解的。或者可以依照一种即定规则,可以被CPU理解的格式。如今Laxcus的全部数据,都是依照这种方案来採集、整理、处理数据。这样做的优点有两个:1.由于规则明白。体系设计相对就简单了;2.在CPU层面。数据的处理速度会非常快。

    典型的象SQL.LIKE这样模糊检索,在数据库里都非常慢,可是在Laxcus分布环境下。这种数据处理也可以立即获得结果。

  • 相关阅读:
    经典多线程问题(四)-轮流打印字母和数字
    经典多线程问题 (一)-多线程售票
    买卖股票的最佳时机 II
    最长递增(严格递增)子序列-可以不连续
    环形链表 II
    最小栈
    买卖股票的最佳时机
    二叉树的层序遍历
    字符串相加
    最大子序和
  • 原文地址:https://www.cnblogs.com/mthoutai/p/7027969.html
Copyright © 2011-2022 走看看