文章详情

短信预约-IT技能 免费直播动态提醒

请输入下面的图形验证码

提交验证

短信预约提醒成功

Kafka简单客户端编程的示例分析

2023-05-30 22:42

关注

这篇文章将为大家详细讲解有关Kafka简单客户端编程的示例分析,小编觉得挺实用的,因此分享给大家做个参考,希望大家阅读完这篇文章后可以有所收获。

一、创建配置类Config

这个类很简单,只是存放了两个常量,一个是话题TOPIC,一个是线程数THREADS

package com.lya.kafka;   public class Config {      public static final String TOPIC = "wordcount";    public static final Integer THREADS = 1; }

二、编程生产者类ProducerDemo

这个类的主要作用就是向Kafka写入相应的消息,并且将消息写入wordcount话题。

package com.lya.kafka;  import java.util.Properties;  import kafka.javaapi.producer.Producer; import kafka.producer.KeyedMessage; import kafka.producer.ProducerConfig;   public class ProducerDemo {  public static void main(String[] args) throws Exception {   Properties props = new Properties();   props.put("zk.connect", "192.168.209.121:2181");   props.put("metadata.broker.list","192.168.209.121:9092");   props.put("serializer.class", "kafka.serializer.StringEncoder");   props.put("zk.connectiontimeout.ms", "15000");   ProducerConfig config = new ProducerConfig(props);   Producer<String, String> producer = new Producer<String, String>(config);    // 发送业务消息   // 读取文件 读取内存数据库 读socket端口   for (int i = 1; i <= 100; i++) {    Thread.sleep(500);    producer.send(new KeyedMessage<String, String>(Config.TOPIC,      "this number ===>>> " + i));   }   } }

三、编写消息者类ConsumerDemo

这个类的主要作用就是消费Kafka中wordcount话题的消息。

package com.lya.kafka;  import java.util.HashMap; import java.util.List; import java.util.Map; import java.util.Properties;  import kafka.consumer.Consumer; import kafka.consumer.ConsumerConfig; import kafka.consumer.KafkaStream; import kafka.javaapi.consumer.ConsumerConnector; import kafka.message.MessageAndMetadata;   public class ConsumerDemo {     public static void main(String[] args) {      Properties props = new Properties();   props.put("zookeeper.connect", "192.168.209.121:2181");   props.put("group.id", "1111");   props.put("auto.offset.reset", "smallest");   props.put("zk.connectiontimeout.ms", "15000");    ConsumerConfig config = new ConsumerConfig(props);   ConsumerConnector consumer =Consumer.createJavaConsumerConnector(config);   Map<String, Integer> topicCountMap = new HashMap<String, Integer>();   topicCountMap.put(Config.TOPIC, Config.THREADS);   Map<String, List<KafkaStream<byte[], byte[]>>> consumerMap = consumer.createMessageStreams(topicCountMap);   List<KafkaStream<byte[], byte[]>> streams = consumerMap.get(Config.TOPIC);      for(final KafkaStream<byte[], byte[]> kafkaStream : streams){    new Thread(new Runnable() {     @Override     public void run() {      for(MessageAndMetadata<byte[], byte[]> mm : kafkaStream){       String msg = new String(mm.message());       System.out.println(msg);      }     }        }).start();      }  } }

四、运行实例

首先,运行消费者类ConsumerDemo
运行结果如下:

Kafka简单客户端编程的示例分析

没有打印任何信息。
此时,我们运行生产者类ProducerDemo
我们再次打开消费者的控制台查看如下:

Kafka简单客户端编程的示例分析

打印出了生产者生产的消息。
至此,Kafka简单客户端编程实例结束。

关于“Kafka简单客户端编程的示例分析”这篇文章就分享到这里了,希望以上内容可以对大家有一定的帮助,使各位可以学到更多知识,如果觉得文章不错,请把它分享出去让更多的人看到。

阅读原文内容投诉

免责声明:

① 本站未注明“稿件来源”的信息均来自网络整理。其文字、图片和音视频稿件的所属权归原作者所有。本站收集整理出于非商业性的教育和科研之目的,并不意味着本站赞同其观点或证实其内容的真实性。仅作为临时的测试数据,供内部测试之用。本站并未授权任何人以任何方式主动获取本站任何信息。

② 本站未注明“稿件来源”的临时测试数据将在测试完成后最终做删除处理。有问题或投稿请发送至: 邮箱/279061341@qq.com QQ/279061341

软考中级精品资料免费领

  • 历年真题答案解析
  • 备考技巧名师总结
  • 高频考点精准押题
  • 2024年上半年信息系统项目管理师第二批次真题及答案解析(完整版)

    难度     813人已做
    查看
  • 【考后总结】2024年5月26日信息系统项目管理师第2批次考情分析

    难度     354人已做
    查看
  • 【考后总结】2024年5月25日信息系统项目管理师第1批次考情分析

    难度     318人已做
    查看
  • 2024年上半年软考高项第一、二批次真题考点汇总(完整版)

    难度     435人已做
    查看
  • 2024年上半年系统架构设计师考试综合知识真题

    难度     224人已做
    查看

相关文章

发现更多好内容

猜你喜欢

AI推送时光机
位置:首页-资讯-后端开发
咦!没有更多了?去看看其它编程学习网 内容吧
首页课程
资料下载
问答资讯