检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
1、网络不可达,请确认网络是否可连通(不需要配置跳板机时) 可按以下顺序排查: 主机是否填写了授权信息,务必先检查这个。 主机是否可在外网登录 linux主机在命令行执行命令ssh -p 端口号 用户名@ip地址,查看是否能访问和登录。(内网可能无法访问到外网部分主机,建议找TE用跳板机或者让伙伴验证)。
windows系统主机扫描提示登陆未成功。 原因可能如下: 1 、主机系统是否支持扫描 2 、远程桌面连接查看主机是否能在外网登录 内网可能无法访问到外网部分主机,建议找TE用跳板机或者让伙伴验证 3 、查看winrm是否正确配置 如何开启WinRM服务? 4 、查看主机的端口是否开启
的数据实施。 图4 创建数据连接 在本实践中,需要将客户源端的MySQL数据迁移至云上MRS,如下图所示为本实践配置的数据连接,分别是源端的两个MySQL连接和目标端的一个MRS Hudi连接。 图5 数据连接清单 添加监控对象,配置想要采集的数据连接的库表信息,以及所需采集的空值字段的表名和表字段名。
资源准备 准备项 资源内容 说明 源端系统连接信息 MySQL数据库 门店基本信息表: store_mgmt.t_user_store_info 订单表: order_mgmt.t_trade_order 本实践需要采集客户源端系统的MySQL数据库数据结构(含门店基本信息表和订单表
Mapping脚本。参考ETL映射设计。 该账号下已开通DataArts Studio服务。 已在该DataArts Studio服务中创建相应的数据连接,以便基于数据连接同步作业以及后续在DataArts Studio中执行脚本。 步骤: 添加DataArts Studio作业,选择对应的Region、实例和空间信息。
管理应用系统和数据连接 在数据调研作业界面点击【管理应用系统和数据连接】进入配置页面。 此模块用于创建应用系统列表和数据连接列表。 应用系统列表用于展示公司的组织架构信息,后续的数据连接即监控等按照组织架构进行划分。 图2 创建组织架构信息 连接管理是根据对应的应用系统和数据库连接类型管理
集群中,以便后续可在CDM集群中执行作业。 图5 一键同步作业 要同步CDM作业,请确保CDM集群实例中有相应的数据连接且数据连接名称与解决方案工作台上的数据连接名称相同。 您可以点击【更多】-【同步历史】,查看同步结果。 图6 查看同步历史 您也可以进入CDM集群中查看作业并运行作业。
图1 表命名规范检查 操作步骤: 参考管理应用系统和数据连接,创建需要进行检查的数据连接; 点击【规则配置】,可查看到解决方案工作台预置的表命名规范检查规则,用户可根据需要修改或新增。 添加监控对象,选择要监控的数据连接类型和连接名称。 图2 添加监控对象 添加采集信息,对需要进行规
资源准备 准备项 资源内容 说明 源端系统连接信息 MySQL数据库 门店基本信息表: store_mgmt.t_user_store_info 订单表: order_mgmt.t_trade_order 本实践需要采集客户源端系统的MySQL数据库数据结构(含门店基本信息表和订单表
代码错误、死循环、数据库发生死锁、与数据库连接错误或通讯错误,未考虑异常操作,功能错误等; 严重:业务阻塞,系统主要功能部分丧失、业务阻塞,数据不能保存,系统的次要功能完全丧失,问题局限在本模块,导致模块功能失效或异常退出;如致命的错误声明、程序接口错误、数据库的表、业务规范、缺省值未加完整性等约束条件;
华为云的服务器不能使用默认的“弹性云服务器”或者“ECS”来命名,需要在命名中体现服务器的用途,比如服务器上部署了一个自建mysql数据库,则可以将服务器命名为“自建mysql数据库”;如使用到自建的redis,kafka,nginx等中间件,也需要在服务器的命名中体现出来。 可靠性要求的安全服务,
逻辑实体与实体之间通过关系连接。解决方案工作台支持创建1:1、1:n、n:n关系类型。 创建实体后,切换至“图形化”界面。 画板上展示的是当前选中的L1主题域分组的实体,您可以通过已下两种方式创建实体 鼠标移动到实体属性会出现连线,选中连线拖动到待连接实体属性上。 在空白画布界面
助性的云服务比如“Web应用防火墙 WAF”、“云堡垒机 CBH”等云服务,不能调整核心云服务比如数据库由RDS for Mysql变为了GaussDB for Mysql,中间件由消息队列kafka变为了消息队列rabbitMQ等等。 提交审核 架构设计完成后提交审核。 提交审
致命:系统不可用,造成系统或应用程序崩溃、死机、系统挂起,或造成数据丢失,主要功能完全丧失,导致本模块或相关模块异常等,如代码错误、死循环、数据库发生死锁、与数据库连接错误或通讯错误,未考虑异常操作,功能错误等; 严重:业务阻塞,系统主要功能部分丧失、业务阻塞,数据不能保存,系统的次要功能完全丧失,问题局
资源栏,展示所有可被拖动设计的资源。各资源按照其所属的服务进行分类。 您可以把想要编排的资源拖动到设计台画布,并运用其生成的连接点进行逻辑关系的定义与关联。 3 设计台,用户设计模板的主要操作画布,用于连接资源之间的关系。 4 属性栏,释放一个拖动资源或选中一个拖动资源时,属性编辑面板会展示您所选中资源所
住鼠标左键或者邮件拖动,可以把图元拖拽到画布中。 图5 设计中心 图元连线:鼠标放在图元上,不用点击,图元四周会出现连接锚点,选中某一个锚点按住鼠标左键拖动,连接到另一图元锚点上,松开鼠标,连线即可完成。 图6 设计中心 图7 设计中心 设计技术架构,设计器使用指导详情见设计中心使用指导
可通过直线、折线将有集成关系的图元连接起来,支持在辅助图元中选择直线、箭头、曲线、折线,或者将鼠标移动到图元上、从图元拖动出折线进行图元连接。 如下图,鼠标移动到图元上,可以看到该图元四周的连接节点,鼠标移动需要连接的点、按住鼠标左键不放即可拖动出连接线,将连接线拖动到要连接到的图元即可。 图15
物理模型设计 物理模型是对真实数据库的描述,即根据逻辑模型对应到具体的数据模型的机器实现。解决方案工作台支持多种数据库类型的物理模型,支持从逻辑实体新建物理模型表/从文件导入,支持导出文件等。 创建物理模型 架构师进入到对应空间和方案后,选择对应信息架构的物理模型设计。 点击“新
版本变化项 说明 是否需重新评估与集成验证 架构 数据库、中间件类型变化 不同数据库、中间件类型的替换,如数据库由RDS for MySQL变为GaussDB for MySQL,中间件由消息队列Kafka变为消息队列RabbitMQ。如自建数据库、中间件、K8S使用云服务替代可不需要重新集成验证。
导入逻辑模型 物理模型设计 物理模型是对真实数据库的描述,即根据逻辑模型对应到具体的数据模型的机器实现。 新建SDI层物理模型。 本实践需要将源端MySQL数据同步至云上MRS(SDI层),本步骤对该目标端进行建模。(目标端为MRS Hudi,在新建物理模型时数据库类型选择“MRS SPARK”即可。)