检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
解决方案 背景信息 解决方案定位于为用户提供便捷的、系统的方式管理作业，更好地实现业务需求和目标。每个解决方案可以包含一个或多个业务相关的作业，一个作业可以被多个解决方案复用。 数据开发模块目前支持处理以下几种方式的解决方案。 新建解决方案 编辑解决方案 导出解决方案 导入解决方案
le/approvers返回 table_info 否 ListTableApproversRequestBody object 申请的表信息 proposers 否 Array of TableProposers objects 申请人列表 reason 否 String 申请理由
源端数据源 作业分片原理 数据仓库 数据仓库服务（DWS） 支持按表字段分片。 不支持按表分区分片。 数据湖探索（DLI） 支持分区表的分区信息分片。 不支持非分区表分片。 Hadoop MRS HDFS 支持按文件分片。 MRS HBase 支持按HBase的Region分片。 MRS
参数类型 描述 error_msg String 返回的错误信息。 error_code String 返回的错误码。 状态码： 500 表4 响应Body参数 参数 参数类型 描述 error_msg String 返回的错误信息。 error_code String 返回的错误码。
0000表示请求处理成功。 error_msg String 错误信息。 状态码： 500 表6 响应Body参数 参数 参数类型 描述 error_code String 错误码，如DQC.0000表示请求处理成功。 error_msg String 错误信息。 请求示例 无 响应示例 状态码： 200
0000表示请求处理成功。 error_msg String 错误信息。 状态码： 500 表6 响应Body参数 参数 参数类型 描述 error_code String 错误码，如DQC.0000表示请求处理成功。 error_msg String 错误信息。 请求示例 创建一个规则模板名称为tes
细粒度认证数据开发连接列表。 表4 FgacSingleUpdateReq 参数 是否必选 参数类型 描述 dw_id 否 String 数据连接id，获取方法请参见查询细粒度认证数据源连接列表。 fgac_flag 否 Boolean 是否开启细粒度认证,true表示开启细粒度认证,false表示关闭细粒度认证。
Studio数据开发调度CDM迁移作业时，系统会将时间宏变量替换为“数据开发作业计划启动时间-偏移量”，而不是“CDM作业实际启动时间-偏移量”。 是 table 高级属性 查询筛选 创建用于匹配文档的筛选器。 例如：{HTTPStatusCode:{$gt:"400",$lt:"500"},HTTPMethod:"GET"}。
b.d.e”、“a.b.d.f”。 fromJobConfig.queryString 否 String 使用Elasticsearch的查询字符串（query string）对源数据进行过滤，CDM只迁移满足过滤条件的数据。 父主题： 源端作业参数说明
输入“\t”。 , 高级参数 使用配置文件 “数据格式”选择为“CDC场景”时配置，用于配置OBS文件。 否 OBS链接 选择OBS连接器信息。 obs_link OBS桶 选择OBS桶。 obs_test 配置文件 选择OBS的配置文件。 /obs/config.csv 最大消息数/poll
表。如果“表名”参数配置的表已存在，则不创建，数据写入到已存在的表中。 说明： Hbase自动建表包含列族与协处理器Coprocessor信息。其他属性按默认值设置，不跟随源端。 不自动创建 Row key拼接分隔符 可选参数，用于多列合并作为rowkey，默认为空格。 , Rowkey冗余
0000表示请求处理成功。 error_msg String 错误信息。 状态码： 500 表5 响应Body参数 参数 参数类型 描述 error_code String 错误码，如DQC.0000表示请求处理成功。 error_msg String 错误信息。 请求示例 无 响应示例 状态码： 200
0000表示请求处理成功。 error_msg String 错误信息。 状态码： 500 表8 响应Body参数 参数 参数类型 描述 error_code String 错误码，如DQC.0000表示请求处理成功。 error_msg String 错误信息。 请求示例 无 响应示例 状态码： 200
参数类型 描述 error_msg String 返回的错误信息。 error_code String 返回的错误码。 状态码： 500 表7 响应Body参数 参数 参数类型 描述 error_msg String 返回的错误信息。 error_code String 返回的错误码。
0000表示请求处理成功。 error_msg String 错误信息。 状态码： 500 表5 响应Body参数 参数 参数类型 描述 error_code String 错误码，如DQC.0000表示请求处理成功。 error_msg String 错误信息。 请求示例 批量删除规则模板，模板id列
0000表示请求处理成功。 error_msg String 错误信息。 状态码： 500 表6 响应Body参数 参数 参数类型 描述 error_code String 错误码，如DQC.0000表示请求处理成功。 error_msg String 错误信息。 请求示例 更新规则模板名称为test的
error_msg String 错误信息。 data Object 返回的数据信息。 状态码：401 表8 响应Body参数 参数 参数类型 描述 error_code String 错误码，如DS.6000，请求处理失败。 error_msg String 错误信息。 data Object
文中提供的性能指标仅用于参考，实际环境会受源或目标数据源性能、网络带宽及时延、数据及业务模型等因素影响。推荐您在正式迁移前，可先用小数据量实测进行速度摸底。 环境信息 CDM集群为xlarge规格，2.9.1 200版本。 性能测试中，表数据规格为5000W行100列，HDFS二进制文件数据规格分别为3
常量参数即参数值是固定的参数，不需要重新配置值。例如“lable”=“friends”用来标识常量值。 变量 您可以使用时间宏、表名宏、版本宏等变量来标记数据库来源信息。变量的语法：${variable}，其中“variable”指的是变量。例如“input_time”=“${timestamp()}”用来标识当前时间的时间戳。
默认使用ClickHouseServer的配置参数http_port，用于接收JDBC请求的端口。 KMS密钥 是 通过KMS加解密数据源认证信息，选择KMS中已创建的密钥。 绑定Agent 是 选择CDM集群作为网络代理，必须和ClickHouseServer网络互通才可以成功创建
长按/截图保存，微信识别二维码
或者关注公众号“华为云”
