检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
Topic中的消息，向kafka中写入数据。 sh kafka-console-producer.sh --broker-list Kafka角色实例所在节点的IP地址:Kafka端口号 --topic 主题名称 --producer.config 客户端目录/Kafka/kafka/config/producer
在银行方案中，为每个执行器提供4个CPU内核和15GB内存，可以获得良好的性能。这2个值并不意味着越多越好，在资源有限的情况下，需要正确配置。例如，在银行方案中，每个节点有足够的32个CPU核，而只有64GB的内存，这个内存是不够的。例如，当每个执行器有4个内核和12GB内存，有时在查询期间发生垃圾收集（G
点，并保存到外部文件系统中。 容错性 Spark及其RDD允许无缝地处理集群中任何Worker节点的故障。鉴于Spark Streaming建立于Spark之上，因此其Worker节点也具备了同样的容错能力。然而，由于Spark Streaming的长正常运行需求，其应用程序必须
解决，如重装操作系统、误删除数据、删除服务目录和文件、修改OS系统配置和文件权限、删除“/etc/hosts”配置、直接后台卸载磁盘、修改节点IP地址、删除创建集群时的默认安全组规则等。 不负责对用户在MRS集群环境上自建安装的非MRS提供的第三方组件的问题排查和解决。 智能数据专家服务
目的端NameService名称：修改备集群的NameService名称。 目的端NameNode IP地址：修改备集群NameNode业务平面IP地址，支持主节点或备节点。 目的端路径：修改备集群保存备份数据的HDFS目录。不支持填写HDFS中的隐藏目录，例如快照或回收站目录；也不支持默认的系统目录，例
of Flavor objects 参数解释： master节点支持的规格列表。 约束限制： 不涉及 取值范围： 不涉及 默认取值： 不涉及 core Array of Flavor objects 参数解释： core节点支持的规格列表。 约束限制： 不涉及 取值范围： 不涉及 默认取值：
长时间积攒导致该临时目录下的文件数量越来越多，占用存储空间越来越多。 处理步骤 登录集群客户端。 以root用户登录任意一个Master节点，用户密码为创建集群时用户自定义的密码。 如果集群开启Kerberos认证，执行如下命令进入客户端安装目录并设置环境变量，再认证用户并按照提示输入密码，该密码请向管理员获取。
系统当前指标取值满足自定义的告警设置条件 对系统的影响 Worker4进程GC时间过长，会影响Worker4进程运行的性能，甚至造成Worker4进程不可用。 可能原因 该节点Worker4进程堆内存使用率过大，或配置的堆内存不合理，导致进程GC频繁。 处理步骤 检查GC时间。 在FusionInsight Manager首页，单击“运维
txt”、“log2.txt”需放在每个部署了Yarn NodeManager实例的节点上，权限为755。 表1 参数说明 参数名称 说明 <filePath> 指本地文件系统中文件路径，每个节点都需要放一份/opt/log1.txt和/opt/log2.txt。可以默认，也可以设置。
tab位于FE节点的“${BIGDATA_HOME}/FusionInsight_Doris_*/install/FusionInsight-Doris-*/doris-be/bin/doris.keytab”路径中，需要拷贝该keytab文件到所有Broker节点上，例如“/h
com/archives/c-j/下载MySQL对应版本的驱动包，解压后上传至安装了Sqoop客户端节点的“客户端安装目录/Sqoop/sqoop/lib”目录下。 通过sqoop export导出Sqoop表数据到MySQL 登录客户端所在节点。 执行如下命令初始化环境变量。 source /opt/client/bigdata_env
ent_user()”函数，那么，在安全模式与普通模式互转时，需要充分评估可能的风险。 操作示例 以Hive客户端安装用户登录安装客户端的节点。 执行以下命令，切换到客户端安装目录，配置环境变量并认证用户。 cd 客户端安装目录 source bigdata_env kinit Hive业务用户
HetuEngine也不支持同时对接两个相同域名的数据源（Hive，Hbase，Hudi数据源）。 数据源集群与HetuEngine集群节点业务平面网络互通。 父主题： 使用HetuEngine
OMS主要进程内存使用率过高，会影响OMS主要进程运行的性能，甚至造成内存溢出导致OMS主要进程不可用，OMS任务执行变慢或失败。 可能原因 该节点OMS主要进程内存使用率过大，或配置的内存不合理，导致使用率超过阈值。 处理步骤 检查进程内存使用率。 在FusionInsight Manager界面，选择“运维
Manager页面，选择“运维 > 告警 > 告警”，查看当前告警“定位信息”中的角色名以及确认主机名所在的IP地址。 以客户端安装用户，登录客户端的节点，执行如下命令： cd {客户端安装路径} source bigdata_env 安全模式（开启Kerberos）： kinit 组件业务用户
本地新建文件“input_data1.txt”，将“log1.txt”的内容复制保存到“input_data1.txt”。 在客户端安装节点下创建文件目录：“/home/data”。将上述文件上传到此“/home/data”目录下。 将kafka的Broker配置参数“allow
参考准备本地应用开发环境将准备好的Python虚拟环境打包，获取“venv.zip”文件。 zip -q -r venv.zip venv/ 以root用户登录主管理节点，将1和2获取的“venv.zip”、“pyflink-sql.py”和“datagen2kafka.sql”文件上传至客户端环境。 pe
参考准备本地应用开发环境将准备好的Python虚拟环境打包，获取“venv.zip”文件。 zip -q -r venv.zip venv/ 以root用户登录主管理节点，将1和2获取的“venv.zip”、“pyflink-sql.py”和“datagen2kafka.sql”文件上传至客户端环境。 pe
于生成新索引。 创建HBase HIndex 安装HBase客户端，详情参见HBase客户端使用实践。 以客户端安装用户，登录安装客户端的节点。 进入客户端安装路径，例如“/opt/client” cd /opt/client 配置环境变量。 source bigdata_env
已在Manager界面添加人机用户，例如：iceberguser，且该用户属于hadoop和hive用户组，主组为hadoop。 操作步骤 使用root登录客户端安装节点，执行如下命令： cd 客户端安装目录 执行以下命令环境变量并认证用户： source bigdata_env kinit 创建的业务用户
长按/截图保存，微信识别二维码
或者关注公众号“华为云”
