-
作业执行过程中，由于源端连接闪断、超时或者源端主动终止了连接导致作业执行失败怎么处理？ - 云数据迁移 CDM
作业执行过程中，由于源端连接闪断、超时或者源端主动终止了连接导致作业执行失败怎么处理？ 问题定位 日志中出现源端的read timeout报错，或者terminate by xxx之类的报错。 规避方案 如果源端网络不稳定，可以使用分片重试能力多次执行作业，可能需要调整作业配置。
-
新建MRS Hive连接时，提示：CORE - 云数据迁移 CDM
0及之后版本，则所创建的用户至少需具备Manager_viewer的角色权限才能在CDM创建连接；如果需要对MRS组件的库、表、列进行操作，还需要参考MRS文档添加对应组件的库、表、列操作权限。 如果CDM集群为2.9.0之前的版本，或MRS集群为3.1.0之前的版本，则所创建的用户
-
迁移数据到DLI时有数据丢失怎么处理？ - 云数据迁移 CDM
迁移数据到DLI时有数据丢失怎么处理？ 问题描述 目的端是DLI的迁移作业执行成功后，显示迁移的数据条数和DLI表中查询的数量对不上，存在数据丢失。 原因分析 查看客户的作业配置，客户并发数设置的是3，如图所示。 查看DLI官网文档不建议同时对一张表并发插入数据。 解决方案 将作业的抽取并发数改成1
-
CDM迁移DWS数据报错Read timedout怎么处理？ - 云数据迁移 CDM
timed out； 故障分析 作业配置中源端目标端均通过where语句多条件过滤，并非索引列，查询会全表扫描，且数据量在上亿行，数据量庞大，导致JDBC数据库连接失败，读取数据超时，进而导致sqoop异常，作业失败。 迁移作业是CDM作为客户端先从源数据中抽取部分数据，写到目标端，在进行
-
MySQL迁移时报错“JDBC连接超时”怎么办？ - 云数据迁移 CDM
根据作业找到对应的MySQL连接名称，查找连接信息。 图2 连接信息 单击“连接管理”，在“操作”列中，单击“连接”进行编辑。 图3 连接 打开高级属性，在“连接属性”中建议新增“connectTimeout”与“socketTimeout”参数及参数值，单击“保存”。 图4
-
日志提示解析日期格式失败时怎么处理？ - 云数据迁移 CDM
小时。因此在CDM迁移数据到云搜索服务的时候，如果是通过CDM自动创建的索引和类型（例如图2中，目的端的“date_test”和“test1”在云搜索服务中不存在时，CDM会在云搜索服务中自动创建该索引和类型），则CDM默认会将时间类型字段的格式设置为“yyyy-MM-dd HH:mm:ss
-
写ES报timeout waiting for connection from pool错误怎么解决？ - 云数据迁移 CDM
写ES报timeout waiting for connection from pool错误怎么解决？ 问题描述 写ES报timeout waiting for connection from pool，且日志中输出多个es_rejected_execution_exception。 故障分析
-
作业从旧集群导出，再导入到新的集群失败怎么解决？ - 云数据迁移 CDM
作业从旧集群导出，再导入到新的集群失败怎么解决？ 问题描述 旧CDM集群是2.6.0版本，新集群是2.8.6.1版本，导入作业报错如下图所示。 原因分析 初步怀疑是新老集群部分参数修改不兼容导致的，通过查看老集群导出的作业json文件，包含throttlingConfig.con
-
读Hudi作业长时间出于BOOTING状态怎么解决？ - 云数据迁移 CDM
读Hudi作业长时间出于BOOTING状态怎么解决？ 问题原因1：除去Yarn队列资源问题，一般作业是卡在执行Spark SQL读Hudi写Hive临时表，这步执行的速度取决于Hudi表的数据量与Yarn队列剩余资源。 问题排查1：查看Yarn任务，搜索Spark JDBC Se
-
OBS导入数据到SQL Server时出现Unable to execute the SQL statement怎么处理？ - 云数据迁移 CDM
SQL statement怎么处理？ 问题描述 使用CDM从OBS导入数据到SQL Server时，作业运行失败，错误提示为：Unable to execute the SQL statement. Cause : 将截断字符串或二进制数据。 原因分析 用户OBS中的数据超出了SQL Server数据库的字段长度限制。
-
字段映射界面无法显示所有列怎么处理？ - 云数据迁移 CDM
g:COORDINATE_Z g:CONTENT g:IMAGES g:STATE 在DWS目的表中，获取与HBase表对应的字段。 如果DWS目的表中没有HBase对应的字段名，需在DWS表定义中加上，假设DWS表中的字段齐全且如下： rowkey day_count category category_name
-
作业源端是Oracle时，运行时间过长报snapshot too old怎么解决？ - 云数据迁移 CDM
作业源端是Oracle时，运行时间过长报snapshot too old怎么解决？ 是Oracle的约束限制导致，迁移过程中源端表中所有数据不能存在更新、删除和新增操作。可以加大UNDO_RETETION，同时调整UNDO表空间大小即可。 父主题： 故障处理类
-
创建Oracle关系型数据库迁移作业时，无法获取模式名怎么处理？ - 云数据迁移 CDM
创建Oracle关系型数据库迁移作业时，无法获取模式名怎么处理？ 这是由于可能上传了暂不支持的最新ORACLE_8驱动（如Oracle Database 21c (21.3) drivers），推荐使用Oracle Database 12c中的ojdbc8.jar驱动（下载地址：https://www
-
迁移MySql到DLI字段类型转换报错For input string："false"怎么处理？ - 云数据迁移 CDM
迁移MySql到DLI字段类型转换报错For input string："false"怎么处理？ 问题描述 MySql-TO-DLI迁移报错，java.lang.NumberFormatException：For input string："false"。 故障分析 根据报错分析
-
迁移Mysql到DWS报错“Lost connection to MySQL server during query”怎么处理？ - 云数据迁移 CDM
迁移Mysql到DWS报错“Lost connection to MySQL server during query”怎么处理？ 问题描述 Mysql-TO-DWS迁移过程中，报错“ GENERIC_JDBC_CONNECTOR_0904:ERROR occurs while retrieving
-
执行Spark SQL写入Hudi失败怎么办？ - 云数据迁移 CDM
执行Spark SQL写入Hudi失败怎么办？ 报错：hoodie table path not found 原因分析 表在metastore中存在，但不是Huid表，或者表在metastore中存在，但是表目录不存在，根因是在表目录下没有.hoodie目录。可能删表的时候只删了文件而没有drop
-
读Hudi作业字段映射多了一列col，作业执行失败怎么处理？ - 云数据迁移 CDM
读Hudi作业字段映射多了一列col，作业执行失败怎么处理？ 问题原因：使用Spark SQL写数据入hudi表，由于配置问题，表schema中会自动增加一列类型为array<string>，名称为col的列。 解决方案：字段映射中删去此列，如果是自动建表，SQL中也要把此列删去。 父主题： Hudi源端案例库
-
作业配置表不存在时自动创建，目的端字段映射不出来怎么处理？ - 云数据迁移 CDM
集群后问题依然存在。 查看CDM迁移作业，源端数据库表名全部为小写，但是迁移的表中是包含有大写字母，将所要迁移的表名跟数据库中保持一致，目的端字段就可以映射出来了，问题解决。 解决方案 在作业设置中，源端配置中迁移的数据库表名应按照数据库中的名称填写或者通过搜索选择表名，问题解决。 父主题： 故障处理类
-
迁移时已选择表不存在时自动创表，提示“CDM not support auto create empty table with no column”怎么处理？ - 云数据迁移 CDM
auto create empty table with no column”怎么处理？ 这是由于数据库表名中含有特殊字符导致识别出语法错误，按数据库对象命名规则重新命名后恢复正常。 例如，DWS数据仓库中的数据表命名需要满足以下约束：长度不超过63个字符，以字母或下划线开头，中间字符可以是字母、数字、下划线、$、#。
-
迁移HDFS文件，报错无法获取块怎么处理？ - 云数据迁移 CDM
迁移HDFS文件，报错无法获取块怎么处理？ 问题描述 用户HDFS为线下自建的，往OBS迁移文件建立好连接器后，测试源端和目的端的连通性都是没问题的。 任务启动时报如下错误： Error: java.io.IOException: org.apache.hadoop.hdfs.B
检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
