检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
场景下，不能添加默认值为空串的非空列。 解决方案 1. 修改源端DDL语句，新增列的默认值设置为非空字符串。 2. 如果无法修改DDL，则需要将DWS的数据库更换为mysql兼容模式，建库语句如：create database bigdata with encoding 'UTF-8'
作业编排好之后，您可以通过测试运行来测试作业编排是否正确。 您可以根据需要，配置作业的调度方式。单击右侧“调度配置”页签，展开配置页面。当前支持单次调度、周期调度和事件驱动调度作业。 图18 配置作业的调度方式 调度配置完成后，您需要单击“保存”按钮保存作业并单击“提交”按钮提交作业版本。然后单击“执行调度”来启动作业的调度。
HIVE数据源 DWS数据源 DLI数据源 database_name 否 String 数据库名 注意：该值作为查询关键字时，不能与url同时存在，需要指定其一进行查询。 schema_name 否 String schema名称。 table_name 否 String 数据表名称。 column_name
所需最低版本 业务能力 适用场景 免费版：基于DLI的电商BI报表数据开发流程 DLI 免费版 数据开发 对数据全生命周期管理的流程诉求较低，需要全托管的大数据调度能力，适用于开发者试用、小规模验证等场景。 初级版：基于DWS的电影评分数据集成与开发流程 DWS 初级版 数据集成+数据开发
可以为成员添加或删除所在的角色/权限集。 为成员添加或删除所在的角色时，仅支持通用角色，暂不支持纳管角色。 成员的权限来自于角色/权限集，需要角色/权限集同步成功，成员的权限才会生效。 查看策略及详情 在DataArts Studio控制台首页，选择对应工作空间的“数据安全”模块，进入数据安全页面。
collectionName 是 String MongoDB/DDS的集合名称。 fromJobConfig.columnList 否 String 需要抽取的字段列表，字段名之间使用“&”分割，例如：“id&gid&name”。 fromJobConfig.isBatchMigration
上表中非云服务的数据源，例如MySQL，既可以支持用户本地数据中心自建的MySQL，也可以是用户在ECS上自建的MySQL，还可以是第三方云的MySQL服务。 整库迁移支持的数据源类型 整库迁移适用于将本地数据中心或在ECS上自建的数据库，同步到云上的数据库服务或大数据服务中，适用于数据库离线迁移场景，不适用于在线实时迁移。
过10kb。注意，10kb仅为算法测试功能的限制，静态脱敏时并不限制样本文件大小不超过10kb。 样本文件大小建议不超过10MB，否则运行需要解析样本文件的静态脱敏任务时，静态脱敏任务可能会失败。 OBS样本文件只能用于DLI引擎的静态脱敏任务，HDFS样本文件只能用于MRS引擎
理和应用的成熟度水平不同。 图2 DCMM标准等级 如何初步判断评估等级 DCMM评估包含的内容也较多，且向下兼容，所以申请高等级评估同时需要满足低等级的要求。简易评估要点主要包含企业规模、数据管理人员、数据管理制度和数据管理工具与平台等维度。 图3 简易评估要点 父主题： 数据管理能力成熟度模型DCMM
审批人数据来源于工作空间中添加的人。 图1 管理审批人 待我审批 选择“数据权限 > 审批中心”，单击“待我审批”页签。 在此页面查看当前需要用户审批的申请单。 单击操作栏的“审批”，查看申请单的详细信息并进行审批。 填写审批意见后，根据实际情况同意或拒绝该申请。 我已审批 选择“数据权限
result.saveAsTextFile(outputPath) #停止SparkContext sc.stop() 需要将编码格式设置为“UTF-8”，否则后续脚本运行时会报错。 准备数据文件“in.txt”，内容为一段英文单词。 操作步骤： 将脚本和数据文件传入OBS桶中，如下图。
各类特殊字符，长度为1～128个字符。 默认情况下，节点名称会与选择的脚本名称保持同步。若不需要节点名称和脚本名称同步，请参考禁用作业节点名称同步变化禁用该功能。 SQL脚本 是 选择需要执行的脚本。如果脚本未创建，请参考新建脚本和开发SQL脚本先创建和开发脚本。 数据连接 是
本例使用系统自定义的规则即可。 创建质量作业。 单击左侧导航“质量作业”。 单击“新建”，配置质量作业的基本信息，如下图所示。 单击“下一步”，进入规则配置页面。您需要单击规则卡片中的，然后配置规则信息，如下图所示。 单击“下一步”，配置告警信息，如下图所示。 单击“下一步”，配置订阅信息，如下图所示。
实现作业每天自动运行，Top10电影的结果自动保存到“top_active_movie”和“top_rating_movie”表。 您如果需要及时了解作业的执行结果是成功还是失败，可以通过数据开发的运维调度界面进行查看，如图11所示。 图11 查看作业执行情况 数据开发还支持配置
默认无。支持的压缩格式有GZIP，ZIP及TAR.GZ。 GZIP 压缩文件后缀 压缩格式为GZIP，ZIP或TAR.GZ时支持此参数。 需要解压缩的文件的后缀名。 当一批文件中以该值为后缀时，才会执行解压缩操作，否则就保持原样传输。当输入"*"时或输入为空时，所有文件都会被解压。
当作业标签是“锁定”状态时，作业也不能添加或移除该标签。 导入作业时，如果作业中存在“锁定”状态的标签，则作业导入会失败。 当作业导入失败需要自动生成标签时，如果标签已存在且被锁定，则导入失败的作业不会添加上该标签。 导入作业标签 具有 Administrator或Tenant
IAM Token，Token获取请参见认证鉴权。 表3 FormData参数 参数 是否必选 参数类型 描述 type 是 String 需要上传的资源type (rule-template、quality-task、consistency-task)。 file 是 File 上传的资源文件。
managed_cluster_id String 纳管角色所在集群id（仅纳管类权限集需要）。 managed_cluster_name String 纳管角色所在集群名称（仅纳管类权限集需要）。 project_id String 项目id。 domain_id String 租户id。
项目ID，获取方法请参见项目ID和账号ID。 表2 Query参数 参数 是否必选 参数类型 描述 action-id 是 String 需要执行的动作，根据导入的对象不同而选择不同的导入动作。 枚举值： import_relation: 导入关系模型：逻辑实体/物理表 import_dimension:
说明： 如果通过DataArts Studio数据开发使用参数传递并调度CDM迁移作业时，不能在CDM迁移作业中配置“作业失败重试”参数，如有需要请在数据开发中的CDM节点配置“失败重试”参数。 当前节点失败后，后续节点处理策略 当前节点执行失败后，后续节点的处理策略： 终止当前作业
长按/截图保存，微信识别二维码
或者关注公众号“华为云”
