内容选择
    内容分类
    学堂 博客 论坛 开发服务 开发工具 直播 视频 用户
    时间
    一周 一个月 三个月
    内容选择
    全部
    内容选择
    内容分类
    • 学堂
    • 博客
    • 论坛
    • 开发服务
    • 开发工具
    • 直播
    • 视频
    • 用户
    时间
    • 一周
    • 一个月
    • 三个月
    重置 确定

    • kafka简介

      Apache Kafka 是一款开源的消息引擎系统，也是分布式流处理平台，使用的是纯二进制的字节序列。 kafka术语 Topic: 发布订阅的对象是主题（Topic） 生产者程序通常持续不断地向一个或多个主题发送消息 Producer:向主题发布消息的客户端应用程序称为生产者（Producer）

      开发者  >  博客
      作者： Rolle
      发表时间： 2023-11-30 19:59:32
      85
      0

    • Kafka消息的存储机制

      Kafka消息的存储机制 Kafka通过topic来分主题存放数据，主题内有分区，分区可以有多个副本，分区的内部还细分为若干个segment。都是持久化到磁盘,采用零拷贝技术。 1、高效检索 分区下面，会进行分段操作，每个分段都会有对应的索引，这样就可以根据 offset二分查

      开发者  >  博客
      作者： 孙中明
      发表时间： 2022-04-03 08:44:01
      434
      0

    • Kafka offset清理

      sh kafka-mirror-maker.sh kafka-topics.sh kafka-console-producer.sh kafka-preferred-replica-election.sh kafka-verifiable-consumer

      开发者  >  博客
      作者： 张俭
      发表时间： 2023-12-29 17:39:13
      0
      0

    • Kafka详解

      org/confluence/display/KAFKA/Clients Kafka API简单易用，日志存储之利器。Storm和Kafka的对接：KafkaSpoutStrom从Kafka中读取数据，本质：实现一个Storm中的Spout，来读取Kafka中的数据；这个Spout，可以称为Kafka Spout。支持两种类型的Spout：1

      开发者  >  博客
      作者： Smy1121
      发表时间： 2019-06-21 11:23:23
      2522
      0

    • kafka搭建

      1、上传并解压kafka [root@win1 soft]# tar -zxvf kafka_2.11-2.1.0.tgz 2、创建logfile文件夹 [root@win1 kafka_2.11-2.1.0]# mkdir -p /hadoop/soft/kafka_2.11-2

      开发者  >  博客
      作者： 考过IE励志当攻城狮
      发表时间： 2021-02-28 00:08:42
      2293
      0

    • Kafka实战(二)-Kafka消息模型核心概念

      nce是Kafka消费者端实现高可用的重要手段。 9 为什么Kafka不像MySQL允许追随者副本对外提供读服务？ 不从follower读几个原因：1，kafka的分区已经让读是从多个broker读从而负载均衡，不是MySQL的主从，压力都在主上；2，kafka保存的数据

      开发者  >  博客
      作者： JavaEdge
      发表时间： 2021-06-03 16:23:11
      1527
      0

    • Kafka查看Topic的信息

      1. Kafka查看所有topic列表 查看所有topic的list信息，命令如下： kafka-topics.sh --list --zookeeper <ZK_IP1:ZK_PORT,ZK_IP2:ZK_PORT,.../kafka> 2. Kafka查看topic的describe信息，命令如下：

      开发者  >  博客
      作者： Summer_
      发表时间： 2022-04-28 03:05:04
      786
      0

    • 看完这篇Kafka，你也许就会了Kafka

      场景 消费形式 kafka基础架构 Record 、Topic、Broker、leader、follower 分区&日志 生产者与消费者 写入和读出的性能 Kafka环境搭建 & Topic管理： kafka和zookeeper之间的关系

      开发者  >  博客
      作者： 毛利
      发表时间： 2021-07-14 19:52:33
      1170
      0

    • Kafka CPU高排查思路

      使用id -Gn名称返回结果异常，sssd服务有问题，如下图所示： kafka-authorizer.log日志为大量打印某用户不属于kafka组或者kafkaadmin组，如下图所示： 服务器的kafka无法正常鉴权，导致用户频繁访问此服务器，cpu异常升高。 解决办法是排查sssd异常的原因并恢复sssd。

      开发者  >  博客
      作者： FI小粉丝
      发表时间： 2021-11-27 09:19:42
      3266
      0

    • kafka配置命令

      /export/servers/kafka_2.11-1.0.0/bin/kafka-server-start.sh /export/servers/kafka_2.11-1.0.0/config/server.properties > /dev/null 2>&1 & 关闭 bin/kafka-server-stop

      开发者  >  博客
      作者： 百忍成金的虚竹
      发表时间： 2021-03-25 15:09:29
      1447
      0

    • 连接状态未连接

      连接状态未连接 服务端点格式不正确 配置信息配置有误 有效地址范围重复 父主题： 常见问题

      开发者 >  开发服务

    • kafka 的架构

      讲一下kafka 的架构 一个典型的Kafka集群中包含若干Producer，若干broker，若干Consumer Group，以及一个Zookeeper集群。Kafka通过Zookeeper管理集群配置，选举leader，以及在Consumer Group发生变化时进行r

      开发者  >  博客
      作者： 孙中明
      发表时间： 2022-04-03 08:44:57
      548
      0

    • kafka经典维护案例集合

      4FusionInsight Kafka创建Topic失败原因及解决方案★★★排查手段3.1如何根据strace信息定位异常连接的客户端★★3.2收集kafka-root.log查看每个broker节点的磁盘IO★★★★★3.3检测网络异常的通用方式★★★★★3.4Kafka集群性能的检测方式★★★★★3

      开发者  >  其他
      作者： Bigdata Go!
      282
      0

    • Kafka监控利器

       　开发过程中，kafka几乎是标配的Mq，如果有一个kafka的监控助手，哪就更完美了，常用的kafka监控工具有 KafkaOffsetMonitor 、Kafka Manager、Capillary、Kafka Eagle，经过测试，最后决定使用Kafka Manager。这篇文章主要介绍Kafka

      开发者  >  博客
      作者： 微服务布道者
      发表时间： 2018-12-14 09:36:19
      4561
      0

    • 连接集群

      连接集群 连接集群的方式 获取集群连接地址 使用gsql命令行客户端连接集群 使用Data Studio图形界面客户端连接集群 使用JDBC和ODBC连接集群 使用DAS连接集群 使用Python第三方库psycopg2连接集群

      开发者 >  开发服务

    • Apache Kafka-初体验Kafka(03)-Centos7下搭建kafka集群

      概述 对于kafka来说，一个单独的broker意味着kafka集群中只有一个节点。要想增加kafka集群中的节点数量，只需要多启动几个broker实例即可。 单个节点的安装： Kafka-初体验Kafka(02)-Centos7下搭建单节点kafka_2.11‐1.1

      开发者  >  博客
      作者： 小工匠
      发表时间： 2021-09-10 16:25:05
      1127
      0

    • 使用Kafka客户端

      工具查看帮助并使用。./kafka-console-consumer.sh：Kafka消息读取工具./kafka-console-producer.sh：Kafka消息发布工具./kafka-topics.sh：Kafka Topic管理工具命令具体使用方法可参考《应用开发指南》

      开发者  >  其他
      作者： 晋红轻
      1766
      0

    • Kafka生产发送数据失败

                      我们使用kafka时，有时候会遇到发送数据失败的情况，其原因及解决方案如下：1.     Kafka topic leader为-1Kafka客户端执行如下命令查看topic的leader信息：kafka-topics.sh --describe --zookeeper

      开发者  >  其他
      作者： Summer_
      3988
      0

    • Kafka基本原理

      场景。结构Kafka是一个分布式、分区化、多副本的消息发布-订阅系统。生产者（Producer）将消息发布到Kafka主题（Topic）上，消费者（Consumer）订阅这些主题并消费这些消息。在Kafka集群上一个服务器称为一个Broker。对于每一个主题，Kafka集群保留一

      开发者  >  其他
      作者： 晋红轻
      2355
      0

    • kafka集群方案

      Topic（主题）进行消息分类。 第二部分：构建 Kafka 集群 1. 选择合适的硬件和网络架构 在构建 Kafka 集群之前，首先需要选择合适的硬件和网络架构。考虑到 Kafka 的高吞吐量和低延迟的特性，建议采用高性能的硬件设备，并确保网络连接的稳定性和带宽充足。 2. 安装和配置 ZooKeeper

      开发者  >  博客
      作者： Rolle
      发表时间： 2023-12-24 21:53:55
      285
      0
    总条数： 10000
    点击加载更多