zoukankan      html  css  js  c++  java
  • 生产环境实践:Cana实现MySQL到ES实时同步

    注:由于文章篇幅有限,获取资料可直接扫二维码,更有深受好评的大数据实战精英+架构师好课你。

    大数据技术交流QQ群:207540827

    速点链接加入高手战队:http://www.dajiangtai.com/course/112.do

    注:Canal必备基础及安装部署,详看完整文档,以下直接摘取干货分享。

    实现MySQL-->Canal-Server(Instance)--->ClientAdapter--->ES同步流程

    所涉及组件的关系(如下)

    相关组件的作用

     

    准备业务库表

    在MySQL中创建test库及test表作为业务库表,我们最终就是要同步test.test表的数据到ES:

     

    执行如下MySQL命令:

     

    配置Instance

    前面安装了Canal_Server,接下来需要给Canal_Server创建Instance来拉取MySQL的binlog。

    1、 登录Canal_Admin

     

    2、 进入Instance管理页

    3、新建Instance

    点击新建Instance就会进入新建Instance配置页面:

    4、载入Instance模板

    Instance配置不需要从零开始写,先载入模板即可,如下图:

     

    5、配置Instance

     

    6、Instance命名

     

    7、保存Instance

     

    保存之后,就自动显示在Instance列表页了:

     

    8、自动启动Instance

    刷新Instance列表页,过一会就已经变成启动状态了:

    至此,MySQL的binlog数据就可以被Canal-Server拉取到了。

  • 相关阅读:
    使用c#读取/解析二维码
    MVVM中的RelayCommand与AsyncCommand
    MVVM模式下的OpenFileDialog
    集成Source Monitor至VS中
    [转]异步command的实现
    使用Messenger实现MVVM的对话框弹出
    使用NPOI访问、控制Excel
    win11更新
    Codeforces Round #749 总结
    Codeforces Round #697 (Div. 3)
  • 原文地址:https://www.cnblogs.com/dajiangtai/p/12377431.html
Copyright © 2011-2022 走看看