第三周学习总结
本周学习内容:
1.德拓云端培训门户中的“大数据采集技术与应用”课程;
实验一:大数据同步技术datax的使用
实验二:大数据清洗技术kettle的使用
实验三:大数据日志采集技术Logstash
实验四:大数据实时采集技术Kafka
实验五:动态感知舆情热点大数据采集技术
2.DataX安装;
datax的开源地址:https://github.com/alibaba/DataX
安装参考:https://www.cnblogs.com/jiangbei/p/10901201.html
https://www.cnblogs.com/zlc364624/p/12374089.html
datax下载地址:http://datax-opensource.oss-cn-hangzhou.aliyuncs.com/datax.tar.gz