使用Docker(k8s)安装Kafka并使用宿主机连接

使用Docker(k8s)安装Kafka并使用宿主机连接使用Docker(k8s)安装Kafka并使用宿主机连接安装Docker及docker-compose具体安装方法可以去官网看教程检查docker-compose是否安装成功创建docker-compose.yml文件version:’2’services:zookeeper:image:”zookeeper”hostname:”zookeeper.local”container_name:”zookeeper”#设置网络别名可随

大家好,又见面了,我是你们的朋友全栈君。如果您正在找激活码,请点击查看最新教程,关注关注公众号 “全栈程序员社区” 获取激活教程,可能之前旧版本教程已经失效.最新Idea2022.1教程亲测有效,一键激活。

Jetbrains全系列IDE使用 1年只要46元 售后保障 童叟无欺

使用Docker(k8s)安装Kafka并使用宿主机连接

  1. 安装Docker及docker-compose
    具体安装方法可以去官网看教程
    检查docker-compose是否安装成功
    在这里插入图片描述
  2. 创建 docker-compose.yml 文件
version: '2'
services:
  zookeeper:
    image: "zookeeper"
    hostname: "zookeeper.local"
    container_name: "zookeeper"
    #设置网络别名 可随意取
    networks:
      local:
        aliases:
          - "zookeeper.local"
  kafka:
    image: "wurstmeister/kafka"
    hostname: "kafka.local"
    container_name: "kafka"
    ports:
      - "9092:9092"
    networks:
      local:
        aliases:
          - "kafka.local"
    environment:
      KAFKA_ADVERTISED_HOST_NAME: kafka.local
      KAFKA_ZOOKEEPER_CONNECT: zookeeper:2181
#设置网络,名为local模式
networks:
  local:
    driver: bridge
  1. 进入Kafka容器
docker exec -it kafka /bin/bash
  1. 创建Topic
/opt/kafka_2.13-2.7.0/bin/kafka-topics.sh --create --zookeeper zookeeper:2181 -replication-factor 1 --partitions 1 --topic test_topic
  1. 测试命令行生产消费
  • 生产者
/opt/kafka_2.13-2.7.0/bin/kafka-console-producer.sh --broker-list kafka.local:9092 --topic test_topic

在这里插入图片描述

  • 消费者
/opt/kafka_2.13-2.7.0/bin/kafka-console-consumer.sh --bootstrap-server kafka.local:9092 --topic test_top
ic --from-beginning

在这里插入图片描述

  1. 从宿主机使用代码连接Kafka
    6.1 进入Zookeeper容器查看brokers注册信息
    # 进入容器
    docker exec -it zookeeper /bin/bash
    
    # 进入zookeeper命令行
    bin/zkCli.sh
    

    6.2 查看brokers注册信息

    get /brokers/ids/1001
    

    在这里插入图片描述
    6.3 配置宿主机hosts

    # 添加
    127.0.0.1	kafka.local
    

    6.4 使用Java代码连接Kafka

    public class KafkaConsumerDemo { 
         
    public static void main(String[] args) { 
         
    	//1.配置消费者连接属性
    	Properties props = new Properties();
    	props.put(ConsumerConfig.BOOTSTRAP_SERVERS_CONFIG, "kafka.local:9092");
    	props.put(ConsumerConfig.KEY_DESERIALIZER_CLASS_CONFIG, "org.apache.kafka.common.serialization.StringDeserializer");
    	props.put(ConsumerConfig.VALUE_DESERIALIZER_CLASS_CONFIG, "org.apache.kafka.common.serialization.StringDeserializer");
    	props.put(ConsumerConfig.GROUP_ID_CONFIG, "test_demo");
    
    
    	//2.创建Kafka消费者
    	KafkaConsumer<String, String> consumer = new KafkaConsumer<String, String>(props);
    
    	//3.订阅topics
    	consumer.subscribe(Arrays.asList("test_topic"));
    // consumer.assign(Arrays.asList(new TopicPartition("test_topic", 0)));
    // consumer.seekToBeginning(Arrays.asList(new TopicPartition("test_topic", 0)));//不改变当前offset
    
    	//4.死循环读取消息
    	for (; ; ) { 
         
    		ConsumerRecords<String, String> records = consumer.poll(Duration.ofSeconds(1));
    
    		if (records != null && !records.isEmpty()) { 
         
    			records.forEach(r -> { 
         
    				System.out.println("key:" + r.key() + "----value:" + r.value());
    			});
    		}
    	}
      }
    }
    

测试成功
在这里插入图片描述

版权声明:本文内容由互联网用户自发贡献,该文观点仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容, 请联系我们举报,一经查实,本站将立刻删除。

发布者:全栈程序员-站长,转载请注明出处:https://javaforall.net/171579.html原文链接:https://javaforall.net

(0)
上一篇 2022年8月21日 下午8:00
下一篇 2022年8月21日 下午8:00


相关推荐

  • docker搭建Coturn TURN服务器

    docker搭建Coturn TURN服务器docker 搭建 CoturnTURN 服务器文章目录 docker 搭建 CoturnTURN 服务器下载镜像启动镜像 失败 启动镜像 不太对 启动镜像 搞个配置文件 自签证书使用配置文件测试下载镜像 dockerpullin coturn 启动镜像 失败 dockerrun d p3478 3478 p49152 65535 49152 65535 udpinstrumen coturn 报错 Errorrespons d

    2026年3月18日
    2
  • jenkin swindows启动_mac系统下docker 部署jenkin s

    jenkin swindows启动_mac系统下docker 部署jenkin smac 系统下 docker 安装 jenkins 前提需要安装完 docker 在进行以下步骤操作 1 为了方便容器内对配置文件进行修改 需要先创建 Jenkins 挂载目录并授权权限 mkdir Users a docker jenkins homechmod777 Users a docker jenkins home2 使用 dockerpullje jenkins 命令 拉取 Jenki

    2026年3月16日
    2
  • docker部署jenkins安装使用教程_docker安装python

    docker部署jenkins安装使用教程_docker安装python前言使用docker安装jenkins环境,jenkins构建的workspace目录默认是在容器里面构建的,如果我们想执行python3的代码,需进容器内部安装python3的环境。进jenki

    2022年7月29日
    9
  • gitlab docker安装_crawl用法

    gitlab docker安装_crawl用法1先给个干货crawlab的官方文档地址https://docs.crawlab.cn/Installation/Docker.htmlgithub说明地址https://github.com/crawlab-team/crawlab/blob/master/README-zh.md2两种安装方式一是通过dockerpull拉取,代码如下dockerpulltikazyq/crawlab:latest二是从github拉取代码,然后使用dockercompose命…

    2025年6月15日
    5
  • docker(6)镜像的使用「建议收藏」

    docker(6)镜像的使用「建议收藏」前言Docker的三大核心概念:镜像、容器、仓库。初学者对镜像和容器往往分不清楚,学过面向对象的应该知道类和实例,这跟面向对象里面的概念很相似我们可以把镜像看作类,把容器看作类实例化后的对象。|

    2022年8月6日
    7
  • docker(11)Dockerfile 中的COPY与ADD 命令「建议收藏」

    docker(11)Dockerfile 中的COPY与ADD 命令「建议收藏」前言Dockerfile中提供了两个非常相似的命令COPY和ADD,本文尝试解释这两个命令的基本功能,以及其异同点,然后总结其各自适合的应用场景。Build上下文的概念在使用dock

    2022年7月29日
    12

发表回复

您的邮箱地址不会被公开。 必填项已用 * 标注

关注全栈程序员社区公众号