-
错误码 - MapReduce服务 MRS
升级节点规格不支持减小vcpu数/memory数。 按照报错提示进行处理 400 12000133 Specification scale-up is not available for this type of nodes. 升级节点规格暂时不支持此节点类型。
-
MRS 1.9.0.8、1.9.0.9、1.9.0.10补丁说明 - MapReduce服务 MRS
patch 解决Yarn出现JVM Create GC thread failed问题 新增Hiveserver2 任务堆积告警 新增Hiveserver HiveMetastore GC时间超过5s告警 新增HiveServer2 解注ZK告警 新增20分钟内Yarn任务失败与kill数超过
-
查询作业exe对象列表(废弃) - MapReduce服务 MRS
finished_step Integer 当前已完成的步骤数。 job_main_id String 作业主ID。 job_step_id String 作业步骤ID。 postpone_at Long 延迟时间,十三位时间戳。 step_name String 作业步骤名。
-
查询特定标签的集群列表 - MapReduce服务 MRS
limit 否 Integer 查询记录数(action为count时无此参数)如果action为filter默认为1000,limit最多为1000,不能为负数,最小值为1。 offset 否 Integer (索引位置),从offset指定的下一条数据开始查询。
-
添加租户 - MapReduce服务 MRS
“N”表示从1开始的自然数,存在同名队列的时候N会自动累加以区别已有队列。例如“saletenant”、“saletenant-1”和“saletenant-2”。 当前租户是否需要关联使用其他服务的资源? 是,执行4。 否,执行5。
-
配置ClickHouse对接普通模式Kafka - MapReduce服务 MRS
--partitions主题分区数和--replication-factor主题备份个数不能大于Kafka角色实例数量。
-
运行HiveSql作业 - MapReduce服务 MRS
运行程序参数 可选参数,为本次执行的作业配置相关优化参数(例如线程、内存、CPU核数等),用于优化资源使用效率,提升作业的执行性能。 常用运行参数如表2。 服务配置参数 可选参数,用于为本次执行的作业修改服务配置参数。
-
创建集群并提交作业 - MapReduce服务 MRS
触发该条件的指标阈值,只允许输入整数或者带两位小数的数。
-
配置ClickHouse通过Kerberos认证对接Kafka - MapReduce服务 MRS
--partitions主题分区数和--replication-factor主题备份个数不能大于Kafka角色实例数量。
-
同步Kafka数据至ClickHouse - MapReduce服务 MRS
--partitions主题分区数和--replication-factor主题备份个数不能大于Kafka角色实例数量。
-
ALM-12045 网络读包丢包率超过阈值(2.x及以前版本) - MapReduce服务 MRS
风险提示:在SuSE内核版本3.0以上或Red Hat 7.2版本,由于系统内核修改了网络读包丢包数的计数机制,在该系统下,即使网络正常运行,也可能会导致该告警出现,对业务无影响,建议优先按照“检查系统环境”进行排查。 可能原因 操作系统问题。 网卡配置了主备bond模式。
-
配置ClickHouse通过用户密码对接Kafka - MapReduce服务 MRS
--partitions主题分区数和--replication-factor主题备份个数不能大于Kafka角色实例数量。
-
Hive应用开发规则 - MapReduce服务 MRS
分桶表不支持insert into 分桶表(bucket table)不支持insert into,仅支持insert overwrite,否则会导致文件个数与桶数不一致。
-
MRS各组件样例工程汇总 - MapReduce服务 MRS
SparkStreamingtoHbaseScalaExample SparkStructuredStreamingJavaExample 在Spark应用中,通过使用StructuredStreaming调用Kafka接口来获取单词记录,然后把单词记录分类统计,得到每个单词记录数。
-
查看集群基本信息 - MapReduce服务 MRS
节点数 对应节点组中包含的节点数量。 付费类型 显示购买集群时的付费类型,包含“按需计费”和“包年/包月”。 操作 升级规格:请参见升级Master节点规格。 扩容:请参见扩容集群。 缩容:请参见缩容集群。 删除:删除节点组时,节点组内的节点个数必须为0。
-
费用账单 - MapReduce服务 MRS
云硬盘(系统盘和数据盘):系统盘/数据盘名称和ID,例如:d222e5e1-f8a2-419d-9c4f-65c90ba79053_node_master1DqD-volume-0000,a06d912b-71eb-4993-a988-55e2543d1084 规格 集群类型和核数,
-
快速开发Kafka应用 - MapReduce服务 MRS
在示例程序“WordCountDemo”中,通过调用Kafka接口来获取单词记录,然后把单词记录分类统计,得到每个单词记录数,关键代码片段如下: ...
-
获取指定目录文件列表 - MapReduce服务 MRS
type String 文件类型: FILE:文件 DIRECTORY:目录 children_num Integer 该目录下的文件条目数。 access_time Long 文件访问时间。 modification_time Long 文件修改时间。
-
Spark2x基本原理 - MapReduce服务 MRS
输入输出一对一,但结果RDD的分区结构发生了变化,如union(两个RDD合为一个,分区数变为两个RDD分区数之和)、coalesce(分区减少)。
-
CarbonData表空间索引语法说明 - MapReduce服务 MRS
UDF输出参数: 参数 类型 说明 geoId Long 通过编码获得一个表示经纬度的数。