检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
大数据架构设计 设计原则 大数据集群设计 大数据任务调度平台设计 大数据参考架构 华为云大数据组件 父主题： 方案设计
单一账号存在两个严重的问题： 单一账号的爆炸半径太大，如该账号崩溃将导致企业所有业务系统不可用。 云平台上账号的资源配额是有上限的，不能在一个账号内无限扩容云资源。
业务创新和市场扩张带来的新增收入 云化转型后，企业借助云平台的先进技术进行产品、服务和商业模式创新，基于云服务商的全球布局快速进军海外市场。如果通过业务创新和进军新市场可以为企业带来50万活跃用户，假设每个用户每年平均贡献收入60元，总共每年为企业带来3000万元的新增收入。
在安全运营方面，CCoE团队负责平台层面的安全防护和集中安全运营，各业务单元的应用团队需要关注应用层的安全防护，如防止SQL注入等；在成本管理方面，CCoE团队负责集中化的成本管理，包括集中化的成本计划、成本监控、成本分析和成本优化等，各业务单元的应用团队需要负责针对云资源打上成本标签
图2 调研方式图 首选CMDB法； 如果CMDB无法获取，次选CMP云管平台法，从现网云管平台或虚拟化管理软件获取； 如果CMDB和CMP都行不通，可以安装信息收集工具（比如华为云RDA）进行采集； 如果以上方法都不可行，则采用人工访谈的方式调研信息。 父主题： 应用系统调研
这些云原生安全云服务与云平台深度集成，在性能、弹性、便利性上有较好的优势，同时，云服务商的安全运营经验也会持续推动云原生安全服务的能力提升，因此建议企业优先选择云原生安全服务。华为云提供的云原生安全服务清单，请参考章节云原生安全服务-。
例如，一个有力的愿景可以是：“通过云化转型，我们将构建一个灵活、高效、安全的数字化平台，赋能业务创新，提升客户体验，最终成为行业领先的智能化企业。”
企业需要建立统一的安全管理平台，整合各类安全信息，提升全局防护能力，才能应对当前的安全挑战。 安全专家稀缺 安全专家的稀缺已成为制约企业安全运营的一大瓶颈。首先，受投资有限的影响，许多企业无法组建庞大的安全团队，专业的安全人才不足。
以某大型零售平台上云为例，采用所有业务系统一把切的方案，通过4次演练，正式切换的时间比预期缩短了40%。
方案2：在华为云ECS重新部署Kong/Zuul网关，然后拷贝源端配置文件到华为云ECS，并修改转发策略 DNS域名解析 解析应用的内外部域名 方案1：使用华为云平台的DNS服务替代源端的DNS，并重新配置DNS解析地址。
数据架构师：由IT主管指派，来自IT部门的大数据团队，负责设计企业在云上的数据架构，包括数据存储、数据处理、数据集成和数据治理。
基于云平台的特点制定云运维流程和标准。 推广云运维工具的使用，实现自动化和智能化。 培训运维团队，提升云运维技能。 应用架构师 优化应用架构，提升系统性能、可扩展性和可靠性。 支持应用现代化，充分利用云服务的优势。 确保应用满足业务需求，具备敏捷性和灵活性。
概述 根据Flexera在2024年发布的《State of the Cloud Report》报告显示，管理云成本成为企业用云的头号挑战，企业的的云成本平均超过预算15%，平均有27%的公有云成本是浪费的，51%的企业已经成立了专门的FinOps团队，另外有20%的企业计划在未来一年成立
验证作业执行结果的一致性 验证大数据任务执行结果的一致性，对比新旧大数据平台的作业输出结果数据是否一致。可以使用对比工具、数据校验脚本或手动检查的方式进行验证。如果发现数据不一致的情况，可能需要考虑迁移过程中的数据转换、数据格式或数据处理逻辑的问题，并进行相应的修复和调整。
这种管理体系允许企业按照不同的粒度进行成本分析和管理，包括子公司、业务系统、产品线、部门、项目，甚至是微服务级别。这种细粒度的管理使得企业能够准确识别各个业务单元的成本消耗情况，从而做出更明智的决策。
CDM围绕大数据迁移上云和智能数据湖解决方案，提供了简单易用的迁移能力和多种数据源到数据湖的集成能力，降低了客户数据源迁移和集成的复杂性，有效的提高您数据迁移和集成的效率。详细信息请参考官网文档。
大型企业或集团公司可以使用企业组织+多账号的方式，通过账号隔离资源和成本，方便业务快速拓展。 中小型企业以及单账号客户，建议优先使用人财物权管理相对完善的企业项目来映射组织。如果存在更多维度、更细粒度规划的诉求，可以使用标签作为组织规划的补充。
云技术知识: 深入理解云计算的概念、架构和服务，熟悉不同的云部署模型（公有云、私有云、混合云），了解主流云平台的特点和优势。 沟通和协调能力: 优秀的沟通、协调和人际交往能力，能够有效地与不同团队和利益相关者沟通协作，具备跨部门沟通和协调能力。
基础环境设计 企业在云上的基础环境主要就是Landing Zone，企业在将任何业务系统云化之前，都需要提前规划和设计一个架构卓越、稳定可靠、易扩展和安全合规的云上运行环境。 具体内容请参考章节 Landing Zone设计。
然后，将这些容器化的微服务镜像上传到云平台，以供部署和生产使用。 数据管理和持久化： 在单体应用转换为微服务时，您需要考虑数据管理和持久化的问题。每个微服务可能需要有自己的数据库，或者共享同一个数据库。选择适合您的需求的数据库解决方案，并确保数据的一致性和可靠性。
长按/截图保存，微信识别二维码
或者关注公众号“华为云”
