检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
mrs_hive_link demo_dwr_db 图39 日期维度 属性配置如下： 表11 属性配置 序号 属性名称 属性英文名称 数据标准 数据类型 代理键 主键 分区 不为空 1 日期维度 dim_date_key - TIMESTAMP 选中 选中 不勾选 勾选 2 时间 real_time
Manager平台的密码。 linkConfig.authType 是 枚举 认证类型，分为以下两种： Simple：非安全模式选择Simple鉴权。 Kerberos：安全模式选择Kerberos鉴权。 linkConfig.properties 否 Map 属性配置，可以添加客户端的配置
CDM集群ID，获取方法请参见查询集群列表。 agent_name 否 String 代理集群名称，获取方法请参见查询集群列表。 env_type 否 Integer 0：开发模式 1：生产模式，默认为0。 qualified_name 否 String 数据连接限定名称。 dw_id
名称：用户自定义连接名称，例如“hdfs_link”。 URI：配置为H公司HDFS文件系统的Namenode URI地址。 认证类型：安全模式Hadoop选择KERBEROS鉴权，通过获取客户端的principal和keytab文件进行认证。 Principal、Keytab文件
name from sqoop.user; 模式或表空间 “使用SQL语句”选择“否”时，显示该参数，表示待抽取数据的模式或表空间名称。单击输入框后面的按钮可进入模式选择界面，用户也可以直接输入模式或表空间名称。 如果选择界面没有待选择的模式或表空间，请确认对应连接里的账号是否有元数据查询的权限。
数据管理 数据管理流程 新建数据连接 新建数据库 （可选）新建数据库模式 新建数据表 父主题： 数据开发
CDM集群ID，获取方法请参见查询集群列表。 agent_name 否 String 代理集群名称，获取方法请参见查询集群列表。 env_type 否 Integer 0：开发模式 1：生产模式，默认为0。 qualified_name 否 String 数据连接限定名称。 dw_id
String getPlanTime(String pattern) 获取指定pattern的计划时间字符串，pattern为日期、时间模式，请参考日期和时间模式。 获取作业调度计划时间，具体到毫秒： #{Job.getPlanTime("yyyy-MM-dd HH:mm:ss:SSS")}
name from sqoop.user; 模式或表空间 “使用SQL语句”选择“否”时，显示该参数，表示待抽取数据的模式或表空间名称。单击输入框后面的按钮可进入模式选择界面，用户也可以直接输入模式或表空间名称。 如果选择界面没有待选择的模式或表空间，请确认对应连接里的账号是否有元数据查询的权限。
标签：可选参数。您可以输入新的标签名称，也可以在下拉列表中选择已有的标签。 适用组件：保持默认即可。 连接方式：选择“通过代理连接”。 手动：选择“集群名”模式，“IP”和“端口”不需要手动填写。 MRS集群名：选择已有的MRS集群。 KMS密钥：选择一个KMS密钥，使用KMS密钥
name from sqoop.user; 模式或表空间 “使用SQL语句”选择“否”时，显示该参数，表示待抽取数据的模式或表空间名称。单击输入框后面的按钮可进入模式选择界面，用户也可以直接输入模式或表空间名称。 如果选择界面没有待选择的模式或表空间，请确认对应连接里的账号是否有元数据查询的权限。
Studio实例中，工作空间名称必须唯一。 描述 空间的描述信息。 空间模式 选择新建工作新建工作空间的模式。 简单模式：即传统的DataArts Studio工作空间模式，使用方便，但无法对数据开发流程和表权限进行强管控。 企业模式：企业模式下DataArts Studio数据开发组件以及对应管
DWS写入优化参数 参数名 类型 默认值 说明 写入模式 enum UPSERT DWS的写入模式，可在目的端配置中设置，实时处理集成作业推荐使用COPY MODE。 UPSERT：为批量更新入库模式。 COPY：为DWS专有的高性能批量入库模式。 批写最大数据量 int 50000 DW
组件 约束限制 公共 DataArts Studio必须基于华为云底座部署。资源隔离场景下，支持以全栈专属云模式部署，另外也支持以华为云Stack和HCS Online混合云模式部署。 关于全栈专属云、华为云Stack和HCS Online的适用场景和差异等更多信息，欢迎通过咨询了解。
Job节点可以使用引入了脚本模板的Flink SQL脚本。 在数据开发主界面的左侧导航栏，选择“数据开发 > 作业开发”。 右键单击作业，创建一个pipeline模式的批处理作业，进入作业开发界面。 选择“MRS_Flink_Job”节点。 “作业类型”选择“Flink SQL作业”，“脚本路径”选择刚创建的Flink
CDM集群ID，获取方法请参见查询集群列表。 agent_name 否 String 代理集群名称，获取方法请参见查询集群列表。 env_type 否 Integer 0：开发模式 1：生产模式，默认为0。 qualified_name 否 String 数据连接限定名称。 dw_id
RS、Hadoop或CloudTable），并且既有KERBEROS认证模式又有SIMPLE认证模式，只能使用STANDALONE模式。 说明： STANDALONE模式主要是用来解决版本冲突问题的运行模式。当同一种数据连接的源端或者目的端连接器的版本不一致时，存在jar包冲突的
DB_mongodb 用户名 连接MongoDB的用户名。 cdm 密码 连接MongoDB的密码。 - 直连模式 适用于主节点网络通，副本节点网络不通场景。 说明： 直连模式服务器列表只能配一个ip。 直连适用于主节点网络通，副本节点网络不通场景。 否 连接属性 自定义连接属性，支
Studio无法直接与非全托管服务进行连接。CDM集群提供了DataArts Studio与非全托管服务通信的代理，所以创建DWS的数据连接时，请选择一个CDM集群。如果没有可用的CDM集群，请参考创建CDM集群进行创建。 CDM集群作为网络代理，必须和DWS集群网络互通才可以成功创建DWS连接，为确保两者网络互通，
Agent功能待下线，无需配置。 - Agent Agent功能待下线，无需配置。 - 导入模式 COPY模式：将源数据经过DWS管理节点后复制到数据节点。如果需要通过Internet访问DWS，只能使用COPY模式。 COPY 单击“保存”完成创建连接。 创建迁移作业 选择“表/文件迁移 >
长按/截图保存，微信识别二维码
或者关注公众号“华为云”
