检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
源端系统连接信息 MySQL数据库 门店基本信息表: store_mgmt.t_user_store_info 订单表: order_mgmt.t_trade_order 本实践需要采集客户源端系统的MySQL数据库数据结构(含门店基本信息表和订单表),因此需要准备好该数据库的连接地址、端口
物理模型设计 物理模型是对真实数据库的描述,即根据逻辑模型对应到具体的数据模型的机器实现。解决方案工作台支持多种数据库类型的物理模型,支持从逻辑实体新建物理模型表/从文件导入,支持导出文件等。 创建物理模型 架构师进入到对应空间和方案后,选择对应信息架构的物理模型设计。 点击“新
套餐购买界面,如果第一次登录解决方案工作台,从未签署过服务声明,点击会跳转到服务声明签署页面,签署服务声明点击【立即使用】即可。 图1 解决方案工作台华为云官网 图2 服务声明签署 一个租户下只要有一个账号签署了服务声明,该租户下其他的账号就都为已签署的状态了。 父主题: 其他
源端系统连接信息 MySQL数据库 门店基本信息表: store_mgmt.t_user_store_info 订单表: order_mgmt.t_trade_order 本实践需要采集客户源端系统的MySQL数据库数据结构(含门店基本信息表和订单表),因此需要准备好该数据库的连接地址、端口
Studio脚本命名是否符合项目定义的规范。 图14 脚本命名检查 环境变量命名 检查DataArts Studio环境变量命名是否符合项目定义的规范。主要用于对脚本中的环境变量进行检查。 图15 环境变量命名检查 数据连接命名规则 检查DataArts Studio数据连接(Oracle、MRS
需要用户入驻解决方案工作台后才可以添加用户到空间中。 方式一:该IAM用户登录华为云,在解决方案工作台入口页面点击【立即使用】,首次登录会进入服务声明签署页,需要您签署服务声明。完成后点击【立即使用】,即可成为解决方案工作台用户。 方式二:联系该IAM账号的企业管理员在运营中心的用户管理页面添加用户。
后,将数据加载到目标系统的过程。解决方案工作台支持SDI、DWI和DWR层物理表、支持多种数据库、支持生成脚本等。 新建ETL映射 图1 新建ETL映射 参数 说明 映射名称 自定义 数据库数据类型 支持DWS、MRS_HIVE、MRS_SPARK,与物理模型数据类型一致 映射方式
License类商品是指将服务商提供的部署在华为云基础设施资源(华为云IaaS)上的商用软件(包括镜像、SaaS等)对应的授权许可作为商品,包括商业操作系统、数据库中间件、应用软件等license。 SaaS类商品是指将服务商提供的部署在华为云基础设施资源(华为云IaaS)上的在线应用软件作为商品。用
代码错误、死循环、数据库发生死锁、与数据库连接错误或通讯错误,未考虑异常操作,功能错误等; 严重:业务阻塞,系统主要功能部分丧失、业务阻塞,数据不能保存,系统的次要功能完全丧失,问题局限在本模块,导致模块功能失效或异常退出;如致命的错误声明、程序接口错误、数据库的表、业务规范、缺省值未加完整性等约束条件;
代码错误、死循环、数据库发生死锁、与数据库连接错误或通讯错误,未考虑异常操作,功能错误等; 严重:业务阻塞,系统主要功能部分丧失、业务阻塞,数据不能保存,系统的次要功能完全丧失,问题局限在本模块,导致模块功能失效或异常退出;如致命的错误声明、程序接口错误、数据库的表、业务规范、缺省值未加完整性等约束条件;
据调研,支持配置数据调研规则,包含DB、表信息等采集周期和具体时间,若未配置,则按默认规则进行数据采集。 DB采集:配置数据库采集时间,如:数据库类型,数据库表数,数据总量,采集时间。 表信息采集:配置表的采集时间。 字段采集:配置字段采集时间。 上报采集:配置库、表、字段采集信息的上报时间。
并同意《隐私政策声明》和《解决方案工作台服务声明》,点击【确定】。 如果环境参数为多个,图钉标识的为默认环境参数,点击右上角的图钉标识或者设置标识可以将环境参数设置为默认参数。 参数名:脚本中通过引用参数名的方式获取参数 值:脚本中通过引用参数名获取到响应的参数值 如果参数需要加
调研,支持配置数据调研规则,包含DB、表信息等采集周期和具体时间,如果未配置,则按默认规则进行数据采集。 DB采集:配置数据库采集时间,如:数据库类型,数据库表数,数据总量,采集时间。 表信息采集:配置表的采集时间。 字段采集:配置字段采集时间。 上报采集:配置库、表、字段采集信息的上报时间。
主账号登录华为云 首次登录会进入《解决方案工作台声明》签署页,需要您签署服务声明。 您可以输入您的邮箱,订阅解决方案工作台最新资讯,包含使用指导、学习课程、特性上新、待办通知等;首次订阅您会收到订阅确认通知,需要您确认后方可订阅成功。 图3 签署声明 图4 确认订阅 点击“立即使用”后即可进入解决方案工作台控制台首页。
数据高可用 (必选) 分布式 √ 数据库集群或主备。使用华为云数据库服务的分布式或主备模式,也可以使用ECS自建分布式、主备数据库,自建时架构图ECS图标需文字体现部署的是什么数据库,并体现集群或主备关系。 主备 √ 数据备份 √ √ 华为云数据库开启自动备份策略,自建时需体现数据备份存储位置。
数据高可用 (必选) 分布式 √ 数据库集群或主备。使用华为云数据库服务的分布式或主备模式,也可以使用ECS自建分布式、主备数据库,自建时架构图ECS图标需文字体现部署的是什么数据库,并体现集群或主备关系。 主备 √ 数据备份 √ √ 华为云数据库开启自动备份策略,自建时需体现数据备份存储位置。
IAM用户登录 首次登录会进入《解决方案工作台声明》签署页,需要您签署服务声明。您可以输入您的邮箱,订阅解决方案工作台最新资讯,包含使用指导、学习课程、特性上新、待办通知等;首次订阅您会收到订阅确认通知,需要您确认后方可订阅成功。 图2 签署声明 快速启动架构设计 登录华为云,进入访问
版本变化项 说明 是否需重新评估与集成验证 架构 数据库、中间件类型变化 不同数据库、中间件类型的替换,如数据库由RDS for MySQL变为GaussDB for MySQL,中间件由消息队列Kafka变为消息队列RabbitMQ。如自建数据库、中间件、K8S使用云服务替代可不需要重新集成验证。
物理模型设计 物理模型是对真实数据库的描述,即根据逻辑模型对应到具体的数据模型的机器实现。 新建SDI层物理模型。 本实践需要将源端MySQL数据同步至云上MRS(SDI层),本步骤对该目标端进行建模。(目标端为MRS Hudi,在新建物理模型时数据库类型选择“MRS SPARK”即可。)
华为云的服务器不能使用默认的“弹性云服务器”或者“ECS”来命名,需要在命名中体现服务器的用途,比如服务器上部署了一个自建mysql数据库,则可以将服务器命名为“自建mysql数据库”;如使用到自建的redis,kafka,nginx等中间件,也需要在服务器的命名中体现出来。 可靠性要求的安全服务,