已找到以下 10000 条记录
  • kafka 单机部署方案

    此种安装方式可以参考这里。 4,安装 Kafka 从官网下载 Kafka 安装包,解压安装: tar -xf kafka_2.11-0.11.0.2.tgz mv kafka_2.11-0.11.0.2 /usr/local/kafka cd kafka 1,启动 kafka 1,启动

    作者: kaliarch
    发表时间: 2023-12-10 13:47:55
    354
    0
  • 修改Kafka实例信息 - 代码示例

    基于华为云Java SDK对分布式消息服务Kafka实例进行生命周期管理的代码示例。其中包括:修改Kafka实例信息。

  • 修改Kafka实例信息 - 代码示例

    基于华为云Java SDK对分布式消息服务Kafka实例进行生命周期管理的代码示例。其中包括:修改Kafka实例信息。

  • 运行Kafka客户端获取Topic时报错 - MapReduce服务 MRS

    运行Kafka客户端获取Topic时报错 问题现象 运行Kafka客户端获取Topic时报错,报错内容如下: ERROR org.apache.kafka.common.errors.InvalidReplicationFactorException: Replication factor:

  • Kafka拉消息的过程

    载转移到其他Broker解决该问题。 Kafka社区也发现了这个Bug,所以现在变成: 修改后语句直接传入FETCH请求中总的分区数,并直接将其传给LinkedHashMap,避免再执行扩容。 说回Follower副本从Leader副本拉取数据。Kafka就是通过ReplicaF

    作者: JavaEdge
    发表时间: 2022-01-10 14:40:30
    1107
    0
  • 源码分析Kafka专栏

    1、初识 Kafka Producer 生产者 2、源码分析 Kafka 消息发送流程(文末附流程图) 3、KafkaProducer Sender 线程详解(含详细的执行流程图) 4、初始 Kafka Consumer 消费者 5、源码分析Kafka 消息拉取流程 6、

    作者: 丁威
    发表时间: 2021-04-18 15:28:05
    1437
    0
  • A(18) Kafka数据重复

    幂等性+ack-1+事务 Kafka数据重复,可以再下一级:SparkStreaming、redis或者hive中dwd层去重,去重的手段:分组、按照id开窗只取第一个值; Kafka数据重复怎么处理? 在下一级消费者中去重。(redis、SparkStreaming) 二、重复消费问题:

    作者: 百忍成金的虚竹
    发表时间: 2021-03-27 16:23:46
    1637
    0
  • HDP 3.1 Kafka 移植指南(CentOS 7.6)

    对于像Hadoop一样的日志数据和离线分析系统,但又要求实时处理的限制,这是一个可行的解决方案。Kafka的目的是通过Hadoop的并行加载机制来统一线上和离线的消息处理,也是为了通过集群来提供实时的消息。《HDP 3.1 Kafka 移植指南(CentOS 7.6)》请见附件

    作者: 真我Realme
    5688
    1
  • Kafka 孕育开源 KarelDB

    KaralDB及其他新兴数据库立足于Kafka嵌入式键值存储系统和名为KCache的内存中缓存。默认情况下,这个新的关系数据库使用配置成RocksDB缓存的KCache,而应用广泛的Kafka流处理软件支持RocksDB缓存。基于Kafka的数据流平台供应商Confluent的Robert

    作者: G-washington
    发表时间: 2019-10-29 16:51:28
    3919
    0
  • 华为云kafka全景实践

    入),即可登录ECS下载Kafka,并上传至ECS执行命令下载Kafka:wget https://repo.huaweicloud.com/apache/kafka/1.1.0/kafka_2.12-1.1.0.tgz解压:tar zxvf kafka_2.12-1.1.0.t

    作者: 学习怪
    1508
    0
  • 分布式消息服务Kafka版 - 分布式消息服务Kafka版

    先购买Kafka实例。Kafka实例采用物理隔离的方式部署,租户独占Kafka实例。 支持区域: 全部 购买Kafka实例 连接Kafka 开源Kafka客户端向Kafka实例生产消息和消费消息前,需要先连接Kafka实例。 创建Kafka实例时,支持开启或者关闭SASL_SSL

  • 开源Kafka部署指导书

    ---------------- | | 节点1 | Kafka客户端 | | 节点2 | Kafka客户端 | | 节点3 | Zookeeper、Kafka | | 节点4 | Zookeeper、Kafka | | 节点5 | Zookeeper、Kafka | # 3 配置部署环境 **步骤

    作者: 真我Realme
    9670
    0
  • Kafka消息堆积了怎么办? - 分布式消息服务Kafka版

    Kafka消息堆积了怎么办? 问题现象:实例的监控指标“消息堆积数”产生了告警。 处理方法1: 登录Kafka实例控制台,单击产生告警的实例名称,进入实例详情页。 在左侧导航栏,单击“监控与告警 > 监控详情”,进入监控页面。 在“消费组”页签中,查看“消息堆积数(消费组可消费消息数)”,找出消息堆积的消费组。

  • Kafka用户权限说明 - MapReduce服务 MRS

    Kafka用户权限说明 操作场景 在启用Kerberos认证的集群中,用户使用Kafka前需要拥有对应的权限。MRS集群支持将Kafka的使用权限,授予不同用户。 Kafka默认用户组如表1所示。 在MRS 3.x及之后版本中,Kafka支持两种鉴权插件:“Kafka开源自带鉴权插件”和“Ranger鉴权插件”。

  • Kafka网络请求处理流程及优化指导

    principal:User:kafka,listener:SASL_PLAINTEXT | kafka.request.logger (RequestChannel.scala:256) 2020-11-25 14:09:55,094 | DEBUG | [data-plane-kafka-netw

    作者: 尘枫
    发表时间: 2021-05-25 12:23:44
    1725
    0
  • Kafka快速性能压测方案

    Kafka快速性能压测方案

  • Kafka实例Topic管理 - 代码示例

    基于华为云Java SDK对分布式消息服务Kafka实例的Topic进行管理的代码示例。其中包括:查询Topic列表、创建Topic、删除Topic。

  • Kafka实例Topic管理 - 代码示例

    基于华为云Java SDK对分布式消息服务Kafka实例的Topic进行管理的代码示例。其中包括:查询Topic列表、创建Topic、删除Topic。

  • Kafka实例的ZK地址是什么? - 分布式消息服务Kafka版

    Kafka实例的ZK地址是什么? Kafka实例依赖ZK进行管理,开放ZK可能引发误操作导致业务受损,ZK仅Kafka内部使用,不对外提供服务。 您可使用Kafka开源客户端连接Kafka实例,调用原生API生产与消费消息。 父主题: 实例问题

  • Kafka CPU使用率高排查思路及解决方案

    查看具体的线程二、          Kafka CPU使用率高的常见原因及解决方案1.     集群规划不合理a)    命令grep -c processor /proc/cpuinfo 查看CPU核数,df -h命令查看Kafka磁盘挂载情况,建议每台机器最大挂盘数量 <=

    作者: Summer_
    7890
    1