摘要: 本文主要介绍了各种数据采集的方法,并重点对日志数据的上传进行了讲解。
文章中提到的链接如下:
1、更多数据集成方案,详见:https://data.aliyun.com/solution/cdp
2、DataX开源项目地址:https://github.com/alibaba/DataX
3、DataX工具包下载地址:http://datax-opensource.oss-cn-hangzhou.aliyuncs.com/datax.tar.gz
4、使用crontab定时调度DataX作业:https://github.com/alibaba/DataX/wiki/Quick-Start
上一节:场景介绍及技术点分析
接下来几个实验如下:
3、数据加工:用户画像
4、数据分析展现:可视化报表及嵌入应用
5、社交数据分析:好友推荐