检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
的责任人和描述信息。 脚本内容大小不能超过16MB。 企业模式下，支持从脚本开发界面快速前往发布。标放置在上，单击“前往发布”，进入待发布任务界面。 在编辑器上方，单击“运行”。Python语句运行完成后，在编辑器下方可以查看脚本的执行历史和执行结果。 对于执行结果支持如下操作：
"raw#cdm_mysql_string_auto.col_char", "ref_name_ch" : "cdm_mysql_string_auto.col_char", "ref_name_en" : "cdm_mysql_string_auto
etwork功能。 图2 选择Network 在数据地图的“首页”界面或“数据搜索”界面，或者在数据目录的“总览”界面或“数据目录”界面，选择需要查询guid的资产，并单击资产名进入资产详情页。 在Network请求中，寻找Name形如“09318f28-939f-4ab6-a3
0/19 网络配置流程 配置华为云数据库所在安全组规则。 华为云数据库所在安全组需要增加入方向规则，放通Migration资源组VPC网段（例如172.16.0.0/19），使其可以访问数据库监听端口。 通用添加安全组规则方法：打开数据源服务界面，进入用户集群，找到网络部分，单击
说明： CDM集群和OBS桶不在同一个Region时，不支持跨Region访问OBS桶。 作业运行中禁止修改密码或者更换用户。在作业运行过程中修改密码或者更换用户，密码不会立即生效且作业会运行失败。 obs.myregion.mycloud.com 端口 数据传输协议端口，https是443，http是80。
天质量评分的平均分。 若一天多次运行该作业，当天的质量评分为最后一次的得分。 单击“表评分”列的评分值链接，展开该表关联的规则评分，如图2所示。 图2 查看规则评分 规则名称为运行实例名称，如果作业被运行多次，取最新时间运行实例的结果。如果同一运行实例中，有多个子实例检验该表，则每个子实例一条记录。
注册账号并实名认证 账号是您访问华为云的责任主体，有关账号的详细介绍请参见账号中心。此处介绍如何注册一个华为账号。若您已有华为账号，可以略过此部分内容。 打开华为云网站www.huaweicloud.com。 单击页面右上角的“注册”按钮。 在注册页面，根据页面提示完成账号注册。
即可，不记录脏数据。 图8 任务配置 单击“保存并运行”，回到作业管理界面，在作业管理界面可查看作业执行进度和结果。 作业执行成功后，单击作业操作列的“历史记录”，可查看该作业的历史执行记录、读取和写入的统计数据。 在历史记录界面单击“日志”，可查看作业的日志信息。 父主题： 使用教程
该目录（如已存在out目录，会报错）。 单击“测试运行”，执行该脚本作业。 待测试完成，执行“提交”。 在“作业监控”界面，查看作业执行结果。 图4 查看作业执行结果 作业日志中显示已运行成功 图5 作业运行日志 图6 作业运行状态 查看OBS桶中返回的记录。（没设置返回可跳过）
数据源和资源组网络不通如何排查？ 问题描述 配置Migration实时集成作业时，检测源端、目的端数据源与资源组的连通性报异常。 图1 连通性检测异常 解决方案 请根据异常项参考下表进行排查。 表1 网络不通排查方法 类型 异常项 方法 数据源 - CDM异常 实例状态检查异常 检查集群是否在及是否正常运行。
如何处理API对应的数据表数据量较大时，获取数据总条数比较耗时的问题？ 问题场景 创建API时，已打开“返回总条数”开关。当API对应的数据表数据量较大时，获取数据总条数比较耗时。 图1 返回总条数 解决方案 在分页查询时，您可以通过参数（参数名use_total_num）控制是否计算并返回数据总条数。
本的责任人和描述信息。 脚本内容大小不能超过16MB。 企业模式下，支持从脚本开发界面快速前往发布。标放置在上，单击“前往发布”，进入待发布任务界面。 在编辑器上方，单击“运行”。Shell语句运行完成后，在编辑器下方可以查看脚本的执行历史和执行结果。 对于执行结果支持如下操作：
能会出现查询库表为空，或者作业失败等不正常场景。 运行模式 EMBEDDED “HIVE_3_X”版本支持该参数。支持以下模式： EMBEDDED：连接实例与CDM运行在一起，该模式性能较好。 STANDALONE：连接实例运行在独立进程。如果CDM需要对接多个Hadoop数据源
启动调度job_agent。然后测试运行工作空间A作业job1，待job1实例运行成功后，前往工作空间B实例监控中查看作业运行结果是否符合预期。 job_agent被触发运行。 如果当天日期和IF条件中的日期匹配，则job_agent作业中的Subjob节点成功运行、子作业job2也执行完成。否则Subjob节点被跳过。
数据库，引用时不要使用其他大小写，例如salesdata或SalesData。 在 Windows 上运行时，不得包含以下任意字符：/\. "$*<>:|?。 在 Unix 和 Linux 系统上运行时，不得包含以下任何字符：/\. "$。 长度限制为 63 字节。 集合名称约束： 应以下划线或字母字符开头。
resources and check YARN or Spark driver's logs for further information”，如何处理？ 问题描述 执行SQL语句失败后，系统提示错误信息“Failed to create ThriftService instance,
操作如下： 在数据开发主界面的左侧导航栏，选择“数据开发 > 脚本开发”。 在脚本目录中，双击脚本名称，进入脚本开发页面。 在页面右侧单击“版本”，查看版本提交记录，勾选需要对比的版本，单击“版本对比”。 图3 对比版本 单击“版本对比”后，将会打开新窗口，左右两边分别展示出不
但不包含节点间的连接关系。 测试运行 测试运行该节点。 说明： 用户可以查看该作业节点的测试运行日志，单击“查看日志”可以进入查看日志界面查看日志的详细信息记录。 从当前节点测试运行 仅在批作业下显示该选项。选择“从当前节点测试运行”，则测试运行当前节点以及后续节点。 添加/删除连线
管控生效。 细粒度认证开关对数据开发中的脚本、作业运行影响总结如下： 当关闭细粒度认证时，数据开发中的脚本执行、作业测试运行、执行调度使用数据连接上的账号进行认证鉴权。 当启用开发态细粒度认证后，数据开发中的脚本执行、作业测试运行使用当前用户身份认证鉴权，执行调度使用数据连接上的账号进行认证鉴权。
单击“导入记录”页签，可查看对应的导入记录。 批量运行质量作业 系统支持批量运行质量作业，一次最多可批量运行200个质量作业。 选择“数据质量监控 > 质量作业”，选择要批量运行的质量作业。 单击“更多 > 批量运行”，即可完成质量作业的批量运行。 图12 批量运行 企业模式下，需要选择运行环境，系统支持可选择“开发环境”或“生产环境”。
长按/截图保存，微信识别二维码
或者关注公众号“华为云”
