检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
当源端数据为OBS类型时，支持的目的端数据类型为DLI、DWS。 须知： DLI到DWS端的数据转换： 因为数据开发模块调用DWS的集群时，需要走网络代理。所以导入数据到DWS时，需要提前先在数据开发模块中创建DWS的数据连接。 DLI导入数据到DWS时，DWS的表需要先创建好。 DLI到C
any response”，可根据提示在Postman设置中关闭“SSL certificate verification”选项或关闭Proxy代理，然后再次尝试运行。 图11 调用API 父主题： 通过不同方式调用API
数据连接创建时间，时间戳。 agent_id String CDM集群ID，获取方法请参见查询集群列表。 agent_name String 代理集群名称，获取方法请参见查询集群列表。 dw_id String 数据连接id。 qualified_name String 数据连接限定名称。
究、国际贸易促进等方面。 在这之前，H公司采用其自建的大数据集群，并安排专人维护，每年固定购买电信联通双线专用带宽，在机房、电力、专网、服务器、运维方面进行高额投入，但其在面对客户不断变化的业务诉求时，因为人员投入不足，大数据集群能力不匹配，而无法聚焦业务创新，使得存量100T的数据只有4%的利用率。
jar格式驱动。 前提条件 已创建集群。 已参见表1下载对应的驱动。 已参见FTP/SFTP连接参数说明创建SFTP连接并将对应的驱动上传至线下文件服务器（可选）。 如何获取驱动 不同类型的关系数据库，需要适配不同类型的驱动。注意，上传的驱动版本不必与待连接的数据库版本相匹配，直接参考表1获取建议版本的JDK8
界面进行调试。 agent_id 否 String CDM集群ID，获取方法请参见查询集群列表。 agent_name 否 String 代理集群名称，获取方法请参见查询集群列表。 env_type 否 Integer 0：开发模式 1：生产模式，默认为0。 qualified_name
仅具备Manager_tenant或Manager_auditor权限，无法创建连接。 cdm 密码 访问MRS Manager的用户密码。 - 开启LDAP认证 通过代理连接的时候，此项可配置。 当MRS Hive对接外部LDAP开启了LDAP认证时，连接Hive时需要使用LDAP账号与密码进行认证，此时必须开启此参数，否则会连接失败。
MySQL数据库连接参数 参数名 说明 取值样例 名称 连接的名称，根据连接的数据源类型，用户可自定义便于记忆、区分的连接名。 mysql_link 数据库服务器 配置为要连接的数据库的IP地址或域名。 单击输入框后的“选择”，可获取用户的MySQL数据库实例列表。 192.168.0.1 端口 配置为要连接的数据库的端口。
界面进行调试。 agent_id 否 String CDM集群ID，获取方法请参见查询集群列表。 agent_name 否 String 代理集群名称，获取方法请参见查询集群列表。 env_type 否 Integer 0：开发模式 1：生产模式，默认为0。 qualified_name
Studio版本，版本差异请参见版本规格说明。 说明： 购买非免费版DataArts Studio实例时，会默认包含一个数据集成CDM集群，此集群规格建议用于作为连接代理。如需用于数据迁移作业，请购买更高规格的批量数据迁移增量包，详情请参考购买批量数据迁移增量包。 计费方式 包年包月 当前DataArts
界面进行调试。 agent_id 否 String CDM集群ID，获取方法请参见查询集群列表。 agent_name 否 String 代理集群名称，获取方法请参见查询集群列表。 env_type 否 Integer 0：开发模式 1：生产模式，默认为0。 qualified_name
HTTP请求方式，表示请求什么类型的操作，包含GET、POST等，遵循resultful风格。 GET：请求服务器返回指定资源，推荐使用GET请求。 POST：请求服务器新增资源或执行特殊操作。POST请求当前不支持body体，而是直接透传。 描述 对API进行简要描述。 标签
表6 ApiTestRequestHeader 参数 参数类型 描述 path String 请求路径。 user_agent String 代理（固定值）。 x_apig_mode String 请求方式（固定值）。 x_app_identity Integer 识别编号（固定值）。
Studio版本，版本差异请参见版本规格说明。 说明： 购买非免费版DataArts Studio实例时，会默认包含1个数据集成CDM集群，此集群规格建议用于作为连接代理。如需用于数据迁移作业，请购买更高规格的批量数据迁移增量包，详情请参考购买批量数据迁移增量包。 计费方式 包年包月 当前DataArts
any response”，可根据提示在Postman设置中关闭“SSL certificate verification”选项或关闭Proxy代理，然后再次尝试运行。 图12 调用API 父主题： 通过不同方式调用API
"1169309252771299328", "attributes" : [ { "id" : 0, "name_ch" : "测试维度_代理键", "name_en" : "dim_key", "alias" : "", "description" : ""
可以在下拉列表中选择已有的标签。 适用组件：保持默认即可。 SSL加密：是否开启，请与源端DWS集群的配置保持一致。 连接方式：选择“通过代理连接”。 手动：选择“集群名”模式，“IP”和“端口”不需要手动填写。 DWS集群名：选择所创建的DWS集群。 KMS密钥：选择一个KMS
> 现有集群”，单击集群名称进入集群详情页面，单击“组件管理”。 单击“下载客户端”。“客户端类型”选择“仅配置文件”，“下载路径”选择“服务器端”或“远端主机”，自定义文件保存路径后，单击“确定”开始生成客户端配置文件。 将生成的配置文件，保存到本地路径。 具体可参见MapReduce服务文档。
作业中目的连接为HDFS连接时，目的端作业参数如表1所示。 表1 HDFS作为目的端时的作业参数 参数名 说明 取值样例 写入目录 写入数据到HDFS服务器的目录。 该参数支持配置为时间宏变量，且一个路径名中可以有多个宏定义变量。使用时间宏变量和定时任务配合，可以实现定期同步新增数据，详细说明请参见使用时间宏变量完成增量同步。
REBOOT_FAILURE：重启失败。 type String 节点类型，只支持一种类型“cdm”。 id String 节点的虚拟机ID。 name String 节点的虚拟机名称。 isFrozen String 节点是否冻结：0：否。1：是。 components String 组件。 config_status
长按/截图保存，微信识别二维码
或者关注公众号“华为云”
