内容选择
全部
内容选择
内容分类
  • 学堂
  • 博客
  • 论坛
  • 开发服务
  • 开发工具
  • 直播
  • 视频
  • 用户
时间
  • 一周
  • 一个月
  • 三个月
  • Kafka

    Kafka Kafka是一个拥有高吞吐、可持久化、可水平扩展,支持流式数据处理等多种特性的分布式消息流处理中间件,采用分布式消息发布与订阅机制,在日志收集、流式数据传输、在线/离线系统分析、实时监控等领域有广泛的应用。 华为云分布式消息服务Kafka版是一款基于

  • Kafka client 消息接收的三种模式

    Kafka client 消息接收的三种模式 引言 kafka的消费模式总共有3种:最多一次,最少一次,正好一次。为什么会有这3种模式,是因为客户端处理消息,提交反馈(commit)这两个动作不是原子性。 1.最多一次:客户端收到消息后,在处理消息前自动提交,这样kafka就认为

    作者: 多米诺的古牌
    5
    1
  • Kafka

    项目说明:本项目为通过python代码对Kafka连接及生产者消费者模型的演示 项目地址:DMS快速开始 -> MessageQueue4Kafka 演示代码test文件夹里,中有Kafka的生产者消费者的实现。 关于项目更多详情,请参阅MessageQueue4Kafka ->

  • 修复Kafka

    修复Kafka 前提条件 已获取FusionInsight Manager登录地址及admin帐号。 操作步骤 登录FusionInsight Manager页面,选择“集群 > 服务 > Kafka

  • Kafka业务迁移

    指先将生产消息的业务迁移到新的Kafka,原Kafka不会有新的消息生产。待原有Kafka实例的消息全部消费完成后,再将消费消息业务迁移到新的Kafka,开始消费新Kafka实例的消息。 将生产客户端的Kafka连接地址修改为新Kafka实例的连接地址。 重启

  • Kafka权威指南》——初始kafka

    这时Kafka登场了。Kafka登场Kafka就是为了解决上述问题而设计的一款基于发布与订阅的消息系统。它一般被称为 “分布式提交日志”或者“分布式流平台”。文件系统或数据库提交日志用来提供所有事务 的持久记录 , 通过重放这些日志可以重建系统的状态。同样地, Kafka 的数据是按照

    作者: 消失er
    发表时间: 2019-01-23 08:14:52
    1114
    0
  • Kafka笔记】Kafka 多线程消费消息

    Kafka多线程消费理解 Kafka Java Consumer设计 Kafka Java Consumer采用的是单线程的设计。其入口类KafkaConsumer是一个双线程的设计,即用户主线程和心跳线程。 用户主线程,指的是启动Consumer应用程序main方法的线程,心跳线程(Heartbeat

    作者: Copy工程师
    发表时间: 2022-01-17 12:05:23
    1801
    0
  • kafka SpringBoot

    port: 8080 spring: application: name: paw-kafka #kafka kafka: # 连接kafka的地址,多个地址用逗号分隔 bootstrap-servers: localhost:9092

    作者: 琴岛蛏子
    发表时间: 2022-03-20 16:16:34
    625
    0
  • 【FI hd 6513】【开源flink 华为kafka】 开源flink连接华为kafka问题

    k kafka connector中开源kafka-client替换为kafka-clients-2.4.0-h0.cbu.mrs.313.r103、在flink-conf.yml 中配置了认证信息#认证参数java.security.auth.login.config: /data/abc/jaas

    作者: mini-bigdata
    576
    6
  • kafka 查看待消费数据_Kafka入门三:几种消费方式

    Kafka client 消息接收的三种模式 引言 kafka的消费模式总共有3种:最多一次,最少一次,正好一次。为什么会有这3种模式,是因为客户端处理消息,提交反馈(commit)这两个动作不是原子性。  1.最多一次:客户端收到消息后,在处理消息前自动提交,这样kafka就认

    作者: 多米诺的古牌
    43
    0
  • Kafka最佳实践-Kafka常见的使用误区

    1.  kafka集群单个节点磁盘挂载的越多越好 业界Kafka的标准使用方式是作为临时缓存使用。因此,很多人会误以为,kafka的每个节点只要存储够大就行,不用关心其他的指标。官方并不建议kafka单节点关在多个磁盘,因为磁盘越多,表示需要更多的处理线程去管理(num

    作者: FI小粉丝
    发表时间: 2021-06-24 01:32:07
    2495
    0
  • 玩转Kafka—Spring&Go整合Kafka

    com/stealthly/go_kafka_client OptioPay:https://github.com/optiopay/kafka https://github.com/nuance/kafka https://github.com/jdamick/kafka.go Con

    作者: Barry Yan
    发表时间: 2022-10-16 11:13:40
    123
    0
  • Kafka生产连接失败

    在使用Kafka时,我们有时候会遇到生产时连接Kafka失败的情况,原因及解决办法如下:1.       Kafka服务异常通过FusionInsight Manager页面,选择“集群->Kafka”,查看当前Kafka集群当前状态,状态是否是良好;如果状态不是良好,说明Kafka服务异常。2

    作者: Summer_
    3678
    0
  • 运行Kafka作业

    选择“组件管理 > Kafka > 实例”,查看Kafka角色实例的IP地址。记录Kafka角色实例中任意一个的IP地址即可。 运行Kafka作业 MRS 3.x及之后版本客户端默认安装路径为“/opt/Bigdata/client”,MRS 3.x

  • 注册DMS kafka实例

    注册DMS kafka实例 功能介绍 该接口用于注册DMS kafka实例。 在注册DMS kafka实例前,需要开放9091端口。

  • kafka

    kafka 可以脱离zookeeper单独使用吗?为什么?

    作者: 火灵
    2866
    2
  • Kafka生产连接失败

    sssd”重启进程。如果属组中无kafkaadmin或supergroup或kafka,说明用户没有配置kafka角色,需添加kafka角色信息;如果只有kafka,需要查看该用户是否有topic的生产权限,查看命令如下: kafka-acls.sh --authorizer-properties

    作者: Summer_
    发表时间: 2022-04-28 06:36:37
    695
    0
  • kafka学习一:docker安装kafka

    - KAFKA_CFG_ADVERTISED_LISTENERS=CLIENT://kafka:9092,EXTERNAL://{{自己的公网ip}}:9093 + - KAFKA_CFG_INTER_BROKER_LISTENER_NAME=CLIENT 复制 将

    作者: 仙士可
    发表时间: 2023-06-30 12:28:22
    25
    0
  • kafka】解决kafka-tool连接kafka,brokers和topics不显示问题

    注意:该方法仅适用于不关心kafka数据的环境,慎用、慎用、慎用。生产环境禁止使用,用了也差不多准备交接了吧! 步骤: 1.进入到kafka安装目录,关掉kafka进程 sh kafka-server-stop.sh 2.删除kafka的所有topics,一个个删除 ./kafka-topics

    作者: 钧瑜
    发表时间: 2023-10-26 00:00:07
    13
    0
  • kafka】浅谈kafka常考特性

    家浅浅分享一下之前准备的`kafka相关知识点`,等看机会的时候可以拿来复习复习。kafka也算是面试常考的组件,一些基本概念就不再写了,就写写面试里常考常问的一些点。 kafka的基本组件 1.  Broker:通俗理解成一台部署了kafka的服务器就是一个Broke

    作者: 在下uptown
    发表时间: 2022-11-07 11:14:36
    190
    0