zoukankan      html  css  js  c++  java
  • kafka数据分区的四种策略

    kafka的数据的分区

    探究的是kafka的数据生产出来之后究竟落到了哪一个分区里面去了
    第一种分区策略:给定了分区号,直接将数据发送到指定的分区里面去
    第二种分区策略:没有给定分区号,给定数据的key值,通过key取上hashCode进行分区
    第三种分区策略:既没有给定分区号,也没有给定key值,直接轮循进行分区
    第四种分区策略:自定义分区

    /// /    producer.send(new ProducerRecord<String, String>("test", Integer.toString(i), Integer.toString(i)));
    //kafka的第一种分区方式,如果给定了分区号,那么就直接将数据发送到指定的分区号里面去
    //producer.send(new ProducerRecord<String, String>("test",2,"helloworld",i+""));
    //kafka的第二种分区策略,没有给定分区号,给定了数据的key,那么就通过key取hashcode,将数据均匀的发送到三台机器里面去
    //注意如果实际工作当中,要通过key取上hashcode来进行分区,那么就一定要 保证key的变化,否则,数据就会全部去往一个分区里面
    

    /// producer.send(new ProducerRecord<String, String>("test",i+"",i+""));
    //kafka的第三种分区策略,既没有给定分区号,也没有给定数据的key值,那么就会按照轮循的方式进行数的发送
    producer.send(new ProducerRecord<String, String>("test",i+""));
    //kafka的第四种分区策略,自定义分区类,实现我们数据的分区

  • 相关阅读:
    掌控像素的虚实
    多用组合,少用继承
    HTML5的语法变化和新增加元素
    又逢六月
    设计心情之心情设计
    web2.0生成器(超过100个)[转]
    css+div CSS教程——元素定位
    项目进度
    清华大学统一认证接口与PHP的调用
    将51JOB的求职意向选择框Down了
  • 原文地址:https://www.cnblogs.com/alexzhang92/p/11098719.html
Copyright © 2011-2022 走看看