检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
String 异常数据输出库。 dirty_out_prefix String 异常表前缀。 dirty_out_suffix String 异常表后缀。 alias String 别名。 configs String 其他配置。 self_defined_fields Array of SelfDefinedFieldVO
业务对象中文名,只读,创建和更新时无需填写。 approval_time String 审核时间。 approver String 审核人。 email String 审核人邮箱。 msg String 审核信息。 directory_path String 目录树。 表8 BizVersionManageVO 参数
String 异常数据输出库。 dirty_out_prefix String 异常表前缀。 dirty_out_suffix String 异常表后缀。 alias String 别名。 configs String 其他配置。 self_defined_fields Array of SelfDefinedFieldVO
String 异常数据输出库。 dirty_out_prefix String 异常表前缀。 dirty_out_suffix String 异常表后缀。 db_name String 库名。 tb_id String 数据表ID,只读。 schema String DWS类型需要。 table_type
业务对象中文名,只读,创建和更新时无需填写。 approval_time String 审核时间。 approver String 审核人。 email String 审核人邮箱。 msg String 审核信息。 directory_path String 目录树。 表9 BizVersionManageVO 参数
分析数据 通过DLI直接对OBS数据进行贸易统计分析。 前提条件 DLI创建OBS外表,对OBS表数据存储格式有所要求: 使用DataSource语法创建OBS表时,支持orc,parquet,json,csv,carbon,avro类型。 使用Hive语法创建OBS表时,支持TEXTFILE
表达式:StringUtils.defaultIfEmpty(value,null) 如果字符串以指定的后缀结尾(包括大小写),则返回布尔值true,否则返回false。例如“abcdef”后缀不为null,则返回false。 表达式:StringUtils.endsWith(value,null)
表达式:StringUtils.defaultIfEmpty(value,null) 如果字符串以指定的后缀结尾(包括大小写),则返回布尔值true,否则返回false。例如“abcdef”后缀不为null,则返回false。 表达式:StringUtils.endsWith(value,null)
表达式:StringUtils.defaultIfEmpty(value,null) 如果字符串以指定的后缀结尾(包括大小写),则返回布尔值true,否则返回false。例如“abcdef”后缀不为null,则返回false。 表达式:StringUtils.endsWith(value,null)
业务对象中文名,只读,创建和更新时无需填写。 approval_time String 审核时间。 approver String 审核人。 email String 审核人邮箱。 msg String 审核信息。 directory_path String 目录树。 表8 BizVersionManageVO 参数
业务对象中文名,只读,创建和更新时无需填写。 approval_time String 审核时间。 approver String 审核人。 email String 审核人邮箱。 msg String 审核信息。 directory_path String 目录树。 表9 BizVersionManageVO 参数
异常数据输出库。 dirty_out_prefix 否 String 异常表前缀。 dirty_out_suffix 否 String 异常表后缀。 quality_owner 否 String 质量责任人。 quality_id 否 String 质量ID,ID字符串。 distribute
操作流程概述 流程介绍 使用CDM+OBS+DLI进行贸易统计分析的操作过程主要包括2个步骤: 使用CDM上传数据到OBS 通过CDM将H公司存量数据上传到对象存储服务OBS。 通过CDM作业的定时任务,每天自动上传增量数据到OBS。 使用DLI分析数据 通过DLI直接分析OBS
approval_time 否 String 审核时间。 approver 否 String 审核人。 email 否 String 审核人邮箱。 msg 否 String 审核信息。 directory_path 否 String 目录树。 表7 DimensionAttributeVO
Studio数据质量组件的操作权限,其余组件仅有查看权限但无法编辑。 用户登录并验证权限 以创建IAM用户并加入用户组章节中新建的IAM账号登录华为云控制台,切换至授权区域。 在“服务列表”中选择数据治理中心,进入DataArts Studio实例卡片。从实例卡片进入控制台首页后,确认能否正常查看工作空间列表情况。
新调整为单行)。 单击“文件 > 另存为”,在弹出的对话框中,“保存类型”选择为“所有文件(*.*)”,在“文件名”处输入文件名和.csv后缀,选择“UTF-8”编码格式(不能带BOM),则能以CSV格式保存该文件。 将源数据CSV文件上传到OBS服务。 登录控制台,选择“存储 >
approval_time 否 String 审核时间。 approver 否 String 审核人。 email 否 String 审核人邮箱。 msg 否 String 审核信息。 directory_path 否 String 目录树。 表7 DimensionAttributeVO
的对应关系,在开发和生产流程中自动切换对应的数据湖。因此您需要在Serverless数据湖服务中准备两套队列、两套数据库资源,建议通过名称后缀进行区分,详细操作请参见配置DataArts Studio企业模式环境隔离。 配置DB,在同一个数据湖服务下配置两套数据库,进行开发与生产环境隔离。
通过公网连通网络 本章节主要为您介绍数据库部署在其他云场景下,通过公网打通网络的方案。 图1 网络示意图 约束限制 资源组不具有公网网段,只能通过公网NAT转换成固定的弹性公网IP访问公网,且该IP不能与数据源公网IP重复。 前提条件 已购买资源组,详情请参见购买数据集成资源组。
通过VPN连通网络 本章节主要为您介绍数据库部署在其他云厂商场景下的网络打通方案。 图1 网络示意图 约束限制 资源组为私网网段,不能与数据源网段重叠,否则会导致网络无法打通。 资源组不具有公网网段,因此本方案仅能与数据源的私网连通。 前提条件 已购买资源组,详情请参见购买数据集成资源组。