文科生、易经与大数据
文科生与大数据
在网上和大家讨论大数据,有的人急眼了,说:
理科生不懂趋势,看不到大数据是未来,
开始玩概念、掉名词。。。
凭什么说理科生看不懂趋势?
玩概念、掉名词,难道不知道互联网时代早20年,硅谷就有:magic
word之称吗?
零零散散,我也出版了二十多本书,比大部分文科生更文科生吧
我在网络上喜欢以理科生自居,是因为觉得文科生大多喜欢玩虚的,空谈无物,
其实,我更喜欢做个读书人。
古代书生讲究六艺,格物骑射,都是基本功,相当于今天的理工类
网络时代,电脑是基础,文科生至少office应该过关
大数据,,提pandas、r语言,gpu超算、hadoop,有些欺负文科生,
office里面的access玩不转,不过至少要熟悉Excel数据分析模吧,知道画画图表、统计汇总这些吧
如果连这些都不懂,谈大数据、谈趋势,不纯纯是扯淡
易经与大数据
其实,殊途同归,什么东西到了极致,根源都是相通的
易经是纯文科的了,zw小数据理论、“黑天鹅算法”,灵感就是来自:易经、阴阳、八卦。。。。。。
在大数据分析时,我们发现,所有的分析,抛开表象,以量化投资为例,到了最后,无非是两种选择:亏、赢
延伸一下,其他项目,也无非也是:
- 输、赢;正、负;胜、负;
- 涨、跌;加、减
- 男、女;老、少;黑、白;取、舍
这些,正好对应易经的:阴、阳
计算机的核心是cpu,cpu的本质,不过是一个“加法器”
在cpu里面,加减其实都是加法,减不过是加上一个负数符号。
这个加法器,正好对应了易经里面的:
一生二:一(cpu加法器)生二(加、减)
易经里面的:二生三
可以理解为,AB两个对象,有三种状态,懂足球的都知道,球赛无外乎:胜、负、和;足彩就是:胜3、和1、负0三种模式。
从投资较度而言,就是:盈利、保本、亏损,三种模式
八卦六爻:三生万物
A、B两队、每队的三种状态,用数学表示,有八种变化(2^3,二的三次方),正好对应八卦
A、B两队、每队的三种状态,对应上、下六爻,组成易经八卦卦象,64种变化(2^6,二的六次方),正好对应易经六十四卦
易经八卦,八八重叠生六十四卦,包含宇宙万物,
小数据理论与六十四卦
易经八卦,八八重叠生六十四卦,包含宇宙万物,
why?
从数学、大数据分析的角度而言,是不是一个项目,有64个关键参数,就可以导出结论?
这个也是目前需要大家论证的问题?
虽然暂时没有找到合适、严谨的数学理论支撑,不过我们由此受到启发,原创的:小数据理论,应用到“黑天鹅算法”实例分析当中,收到了非常好的效果。
足彩,被误解的投资模式:年收益269%的神奇投资术
《零起点,python大数据与量化交易》
http://blog.sina.com.cn/s/blog_7100d4220102vlpa.html
269%的年收益,相信比目前99%的大数据理论、投资公司更加靠谱
相对与其他大数据分析理论,zw小数据理论、“黑天鹅算法”目前的一个重点就是,做减法,不断减少数据采样参数的数量。
这个做减法,我们找到了相关的哲学、和数学支持:
实战测试,数据越多,反而会影响精度。目前个人数据分析的一个重点,就是“小”数据。老子《道德经·第六十三章》有云:天下大事,必做于细。
我在一个blog上面也找到了数学支持,龙格现象,http://zh.wikipedia.org/wiki/龙格现象
::维度越多,可供单一维度的数据量就也少,反而会影响分析结果.
《大数据和高频量化交易》http://blog.sina.com.cn/s/blog_7100d4220102vkai.html
至于最后,是不是六十四个,就是最佳输入参数比,我们还在摸索
当然以上都是一家之言,大家有兴趣,自己琢磨。