检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
大数据架构设计 设计原则 大数据集群设计 大数据任务调度平台设计 大数据参考架构 华为云大数据组件 父主题： 方案设计
Center of Excellence 云卓越中心 CFW Cloud Firewall 云防火墙 CMDB Configuration Management Database 配置管理数据库 CMM Cloud Maturity Model 云化成熟度模型 CNCF Cloud Native
任务数量 调研各类任务的总数量，用于评估任务迁移周期及改造工作量。如：XX调度平台下，Jar任务XX个。 任务更新周期 识别出不同调度平台，不同任务类型的任务更新周期。如：XX调度平台XX类任务月度更新；XX平台XX类型任务每日XX点更新。 任务详细信息 识别出所有任务的详细信息，包括
导出源端HIVE元数据，导入华为云MRS-Hive 外置元数据MySQL 使用华为云DRS服务同步MySQL中的元数据到云上RDS 存量数据 Hive历史数据存放在HDFS 使用华为云CDM工具迁移所有历史数据到华为云MRS服务或华为云OBS存储（存算分离场景） Hbase历史数据 使用华为云CDM工具迁移所有历史数据到华为云MRS服务
保障 在上云迁移的保障阶段，需要执行以下任务来确保顺利过渡到新的云环境： 云平台监控：确保建立有效的监控系统，跟踪云平台的性能、可用性和安全性。设置警报机制，及时发现并解决潜在的问题。 系统监控和运维：设置系统监控和告警，确保及时发现和解决潜在的问题。配置基础设施监控工具，监测服
日刷新/周刷新/月刷新/实时更新 任务执行区间 让数据迁移、数据校验和业务高峰期错开。 离线任务上班前和下班后执行 调研的方法主要是通过当前大数据平台获取，并辅助一些调研访谈进行补充和确认。 父主题： 大数据调研
值和增长机会。 云化转型 云化转型（也叫云转型）是指将组织的IT基础设施、应用系统、业务流程等迁移到云计算平台，或者利用云计算技术对其业务模式和运营流程进行重构和优化的过程。它不仅仅是简单的“搬迁上云”，更是一个涉及战略、技术、组织和流程的全面转型。目标是利用云计算的优势，提升业
到统一的安全运营平台中，安全云脑可以纳管华为云和IDC的运行环境，还可以跨Region、跨账号纳管运行环境。 资产盘点，识别并清理资产风险 使用安全云脑自动盘点华为云上各类资产（主机、IP、网站、数据库等），并使用第三方生态软件将云下的资产信息，自动对接到安全云脑中。 开通HSS
略保持对齐，确保云化转型能够实现组织的业务目标。在该阶段需要分析干系人利益、识别云化驱动力、评估云化成熟度、制定云化目标和分析云化收益，然后制定符合组织业务战略的云化转型战略。 顶层规划：云化转型是一项系统性工程，不是简单的将应用系统迁移到云上，需要基于组织的云化转型战略有针对性
大数据分析则帮助企业深入了解用户需求，优化产品和服务，实现精准营销和精细化运营。 物联网技术将设备连接上云，实现数据实时采集和远程控制，催生了智能家居、智慧城市等创新应用。 华为云使得这些新技术唾手可得，企业随时随地都能利用这些新技术进行快速创新和快速试错，大幅加速了创新的步伐，通
优先推荐，华为云有技术支持 镜像导入/导出 OS不变，版本一致，停机时间长 - 重新部署：针对公有云的平迁方式的应用上云场景，我们建议使用CI/CD流水线构建自动化平台，然后在云上重新部署应用。 SMS工具迁移：是一种P2V/V2V迁移服务，可以帮您把X86物理服务器或者私有云、公有
身份和权限设计 华为云基于大量成功交付的项目，总结提炼了以下用户和权限管理的最佳实践。 集中身份和权限管理 企业自己的身份管理系统能更好更及时地匹配员工的入职、转岗和离职流程，避免转岗和离职人员继续拥有访问华为云的访问权限。建议您使用企业自己的身份管理系统与华为云IAM身份中心（IAM
拥有良好的沟通和人际交往能力。 具备一定的云技术知识。 IT部门 云培训师 开发和交付云计算相关的培训课程，涵盖云基础设施、云架构设计、云运维、云安全等方面。 推广用云和管云的最佳实践，通过最佳实践减少云化风险。 扎实的云技术知识和实践经验。 优秀的教学能力和沟通技巧，能够将复杂的云技术概念清晰地传达给他人。
和使用IT资源的用户映射到华为云上。 例如HR部门不管理、不查看、不操作任何云上IT资源，就不需要在华为云上创建一个对应HR部门的组织单元；财务小张不负责IT系统的成本核算、分析和预算管理，就无需为小张在华为云上创建一个拥有财务管理权限的用户。 华为云提供以下组织单元和账号的参考
最佳实践在线文档 其他云MySQL数据库 华为云RDS for MySQL 其他云MySQL迁移到云数据库 RDS for MySQL 华为云GaussDB(for MySQL) 其他云MySQL迁移到GaussDB(for MySQL) 其他云MongoDB 华为云DDS 其他云MongoDB迁移到DDS
Zone设计、平台工程设计、云运营模式设计等。 建立云治理框架：负责制定云平台的治理框架、治理策略、安全标准、合规性要求等，确保云基础设施和应用系统的安全、稳定和合规。 提供云技术支持： 为企业内部提供云技术方面的培训、咨询和支持，帮助各部门更好地理解和应用云技术。 管理云平台和资源：
调研 大数据迁移是指将大数据集群、大数据任务调度平台和大数据应用从一个运行环境迁移到另一个运行环境的过程。它包含如下三个模块，本节重点介绍的是大数据集群和大数据任务调度平台的迁移，大数据应用的迁移方法请参考应用迁移上云，本节只介绍差异部分。 大数据集群迁移：将大数据集群（包括存储
的服务器迁移到华为云。 方案2：在华为云ECS重新部署Kong/Zuul网关，然后拷贝源端配置文件到华为云ECS，并修改转发策略 DNS域名解析 解析应用的内外部域名 方案1：使用华为云平台的DNS服务替代源端的DNS，并重新配置DNS解析地址。 方案2：在华为云的ECS上部署DNS服务，并重新配置DNS解析地址。
检查数据层无新增； 源端数据层和华为云数据层增量同步完成，并完成数据一致性对比，断开同步链路； 华为云上的应用层和数据层内部域名等配置修改，重启华为云上的应用服务； 外部DNS域名解析，将解析地址从源端接入层切换到华为云接入层，使外部流量进入华为云； 图2 一把切方案 应用层灰度切流，数据层整体切换
可以根据实际需要选择云服务或自建大数据组件： 业务数据源： 业务数据源是大数据平台的数据输入来源，可以是传感器、网站日志、移动应用、社交媒体等各种数据源。通过数据采集和提取，将原始数据收集到大数据平台进行后续处理和分析。 数据集成： 数据集成是将来自不同数据源的数据进行整合和转换
长按/截图保存，微信识别二维码
或者关注公众号“华为云”
