检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
大数据架构设计：大数据的部署架构设计包括大数据集群部署架构设计、大数据任务调度平台部署架构设计和大数据应用部署架构设计，其中大数据应用的部署架构可以参考应用部署架构的设计方法。大数据架构设计同样要考虑架构设计的6要素。 在做云上架构设计时，企业可以参考TOGAF的架构设计方法论，可以
停写不停读，主要指切换期间，为了追求较好的用户体验，保持一部分读的服务不停服，保持在线可使用状态；为了保持数据一致性，写的服务仍然采用停服方式进行切换。从业务对外体验上，多数用户感知不到停服的影响，比如某购物平台，用户仍然可以浏览商品，但是不能下单，下单时可友好的提示：系统正在升级中，预计凌晨4点恢复，请您稍后重试下单等。
组建实施团队 在企业上云的实施阶段，组建一支高效且专业的实施团队是确保项目成功的关键。该团队将负责执行上云计划和具体的上云实施工作，保障各项上云任务的顺利进行。上云实施团队应由来自不同领域的专业人员组成，企业可以参考前述的CCoE组织架构和角色职责，组建出一个全面且专业的上云实施团队，以下为必要的团队成员。
调研方法有很多，企业要结合自身的实际情况，从调研的效率、调研获取信息的完整度和真实度三个方面评估，选择最合适的调研方式。通常情况下，优先推荐CMDB调研法，CMDB中缺少的信息再通过云管平台或调研访谈的方式补齐。 如下是常见的调研方式，建议企业遵循由易到难的调研思路进行调研。有些服务
根据Flexera在2024年发布的《State of the Cloud Report》报告显示，管理云成本成为企业用云的头号挑战，企业的的云成本平均超过预算15%，平均有27%的公有云成本是浪费的，51%的企业已经成立了专门的FinOps团队，另外有20%的企业计划在未来一年成立FinOps团队。
切换 大数据的切换主要是指大数据应用的切换，其切换演练和正式切换的步骤请参考章节切换。本节重点介绍大数据应用切换的3个切换点，以便更好的指导大数据应用的切换。 双跑场景：大数据应用分别在源环境和目标环境各部署一套，实现双跑，切换点在域名，业务切换时只需要进行域名的切换，将业务流量切换到新应用。
形成全局性的安全态势感知。 同时，合规要求的提高也给企业带来了新的挑战。国内外的法律法规，如中国的网络安全法、数据安全法和个人信息保护法，欧盟的GDPR，金融行业的PCI-DSS，医疗行业的HIPPA等，对数据隐私和网络安全提出了严格的要求。企业需要投入大量的资源来满足不同地区和行业的合规标准，增加了管理负担。
环境迁移到另一个运行环境的过程。它包含如下三个模块，本节重点介绍的是大数据集群和大数据任务调度平台的迁移，大数据应用的迁移方法请参考应用迁移上云，本节只介绍差异部分。 大数据集群迁移：将大数据集群（包括存储、计算和管理组件）迁移到新的运行环境，包括集群的重新配置和数据迁移。集群迁
保障 在大数据迁移的保障阶段，需要执行以下任务来确保顺利过渡到新的云环境： 监控和警报设置：建立实时监控系统，监测集群、任务调度平台和应用程序的运行状态。设置警报，以便及时发现潜在的问题并采取措施。 优化集群性能：对大数据集群进行性能评估和调优。监视资源使用情况，优化配置参数、调整集群大小和资源分配，以提高整体性能。
期管理的工程学科。其目标是通过标准化和自动化的方式，减少开发人员与底层基础设施之间的复杂交互，从而提高开发效率和交付速度。Gartner在2023年和2024年连续将其列为十大重要战略技术趋势，并预测到2026年将有80%的大型软件工程组织将建立平台团队为开发者提供可重用的服务、
基础环境设计 企业在云上的基础环境主要就是Landing Zone，企业在将任何业务系统云化之前，都需要提前规划和设计一个架构卓越、稳定可靠、易扩展和安全合规的云上运行环境。 具体内容请参考章节 Landing Zone设计。 企业需要针对云环境的安全防护设计全面的安全防护方案，请参考章节安全架构设计。
基础环境调研的主要是企业当前的IT基础架构的现状和上云需求，包括资源信息、组网信息、安全架构、运维架构、访问权限管控、资源计量计费等。调研的方式主要是从IT系统导出（如CMDB、CMP、虚拟化管理软件），并结合问卷访谈。基础环境的调研主要是找企业的运维团队。调研人员会与企业的运维团队合作，收集与基础环境相关的数据和信息。
任务数量 调研各类任务的总数量，用于评估任务迁移周期及改造工作量。如：XX调度平台下，Jar任务XX个。 任务更新周期 识别出不同调度平台，不同任务类型的任务更新周期。如：XX调度平台XX类任务月度更新；XX平台XX类型任务每日XX点更新。 任务详细信息 识别出所有任务的详细信息，包括任
企业需要建立严密的安全责任体系，贯彻违规问责机制。要求每个员工都对自己工作中的行为和结果负责，不仅要对技术和服务负责，也要承担法律的责任。安全问题一旦发生，可能会对企业带来极大影响。因此不管故意还是无意，要以行为和结果为主要依据对员工进行问责。根据安全违规的性质，以及造成的后果确定问责
6R策略是指将现有的应用程序和数据迁移到云端的六种不同方式，如下图所示。 图1 6R策略 以下是6R策略的含义和适用场景。 表1 6R策略的含义和适用场景 策略 含义 适用场景 Retire 停止使用应用程序或其组件，因为它不再需要或有更合适的替代方案。这并非严格意义上的“迁移”，而是对现有应用的淘汰。 应用程序不再被业务使用。
在企业上云过程中，组建一支高效的调研评估团队是至关重要的。该团队将负责开展详尽的调研工作，评估企业现有的IT基础设施、业务需求和上云的收益，确保上云策略的有效性和可行性。调研评估团队由来自不同部门的成员组成，企业可以参考前述的CCoE组织架构和角色职责，组建出一个全面且专业的上云调研评估团队，以下为必要的团队成员。
在企业推进上云方案设计的过程中，构建一个高效且专业的方案设计团队是确保项目成功的关键。该团队将负责设计全面的上云方案，涵盖上云技术架构、业务架构优化、成本效益分析、安全合规等多个维度，以保障上云方案的可行性。企业可以参考前述的CCoE组织架构和角色职责，组建出一个全面且专业的上云方案设计团队，以下为必要的团队成员。
根据源端数据权限控制组件的不同，选择不同的权限数据迁移方式 Sentry、Ranger等 数据重要性 调研数据重要性的目的是区分核心数据和非核心数据，用于迁移优先级和数据校验标准。 交易类是核心数据，日志类是非核心数据 数据更新频率 针对不同的刷新周期，制定数据的迁移计划和校验计划。
性能是目标架构设计中需要考虑的非常重要的一个方面。上一小节介绍了可扩展性设计，性能设计要考虑很重要的一点就是扩展性，可以说可扩展性是高性能的必要条件， 影响云上应用性能的主要因素包括以下几个方面： 针对计算资源，延时是操作执行之间所花的等待时间，也是云计算性能的最直接表现； 针对网络资源，吞吐量是评价数据处理执行的速率；
性、配置项间的关系等)，记录配置信息等。并通过专业的CMDB工具对配置项、配置项的属性和配置项之间的关系进行管理。 应用系统的各项变更都是影响应用系统安全稳定运行的因素。生产环境中的操作系统、数据库、中间件和应用程序等的变更，包括软件更新、配置改变等，都需要通过有序的活动进行变更
长按/截图保存，微信识别二维码
或者关注公众号“华为云”
