检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
大数据调研 平台调研 数据调研 任务调研 父主题： 调研评估
大数据应用部署 大数据应用的部署有2种方法，可以基于华为云ECS重新部署大数据应用，或者是使用华为云SMS工具将大数据应用迁移到华为云ECS。
大数据 大数据是指规模庞大且复杂的数据集合，对于企业来说，如何收集、存储和分析大数据具有重要意义。以下是大数据如何使能业务创新、与业务结合并推动业务现代化的几个方面： 数据驱动决策：大数据分析可以帮助企业从海量数据中提取有价值的信息和洞察力，为决策提供支持。
大数据迁移 调研 设计 部署 迁移 验证 切换 保障 父主题： 采用实施
数据调研 数据调研主要包括如下方面： 表1 数据调研方法表 调研内容 调研目的 举例 数据类型 根据数据类型选择合适的迁移工具 HDFS、HBase、MySQL等 数据量 历史数据量，用于评估历史数据迁移周期； 日增量数据，用于评估每日增量数据同步周期。
无需管理IT基础设施：云服务商负责云数据中心、硬件、网络、虚拟化等IT基础设施的运维，企业只需要聚焦应用系统的运维。
大数据架构设计 设计原则 大数据集群设计 大数据任务调度平台设计 大数据参考架构 华为云大数据组件 父主题： 方案设计
数据层：包括数据库、对象存储、文件系统，数据库一般通过华为云的数据迁移工具DRS做迁移，对象存储一般通过华为云对象存储迁移工具OMS做迁移，文件系统一般通过Rsync等迁移工具来迁移。
例如，将应用程序从使用本地数据库迁移到使用云数据库服务。这通常不涉及修改核心应用程序代码。 希望利用云平台的PaaS服务，例如数据库、消息队列等，以减轻自建数据库和消息队列的运维压力。 需要提高应用程序的性能或可扩展性。
同时，GoReplay输出的out.file文件，会占用大量的磁盘空间，注意磁盘使用率，防止因磁盘写满导致网关应用不可用，最好使用网络存储来存放输出文件。 在进行流量回放时，目的端业务如果有访问第三方接口的需求，可能会对生产业务产生影响，注意做好网络隔离。
依赖关系主要包括三种：共享数据依赖、共享服务器依赖、应用间的通信依赖。
具备数据分析和报告撰写能力。 拥有良好的沟通和人际交往能力。 具备一定的云技术知识。 IT部门 云培训师 开发和交付云计算相关的培训课程，涵盖云基础设施、云架构设计、云运维、云安全等方面。 推广用云和管云的最佳实践，通过最佳实践减少云化风险。 扎实的云技术知识和实践经验。
什么是应用现代化 把应用和数据搬“上云”并不是终点，上云只是数字化转型的开始，我们还需要持续进行巩固和优化，通过“应用现代化”来应对新的IT和业务的需求，支撑云上业务发展，“上云”只是做了搬运工和架构师的事，“云上”我们要做体验官，通过使用云的新技术来不断优化业务体验，支撑业务创新
数据采集和分析：物联网设备可以收集大量的传感器数据，包括温度、湿度、压力等各种环境参数。通过对这些数据进行分析，企业可以获得有价值的洞察，用于改进产品质量、优化运营流程和预测需求变化。
数据边界 华为云提供了全方位数据边界保护您的敏感数据，全方位数据边界基于身份控制策略、网络控制策略和资源控制策略构筑起一道坚固的数据安全屏障。确保只有经过严格验证的可信身份，在符合安全标准的可信网络环境中，方能获得对特定资源的访问权限，从而保障数据安全。
通过编写配置文件或使用命令行工具，定义容器的部署和运行方式。 网络和存储配置：配置容器之间的网络通信和访问外部资源的方式。确保容器可以与其他容器、数据库、消息队列等进行交互，并确保数据持久性和可靠性。
（xxx个） 3.1 停止源端配置中心 消息队列数据迁移 4.1 消息队列MQ数据迁移 4.2 等待&确认kafka消费完成 确认源端的数据层数据静止 5.1 确认源端的redis数据静止 5.1 确认源端的MySQL数据静止 5.1 确认源端的MongoDB数据静止 数据一致性对比
云安全则借助于云服务商提供的丰富安全工具和服务，如身份与访问管理（IAM）、虚拟防火墙、安全组、加密服务等，支持自动化和可编程的安全管理，能够快速响应和调整安全策略，提高了安全管理的效率。
图1 双跑场景 推数场景：适用于数据源主动向应用推数的场景，切换点在数据源，需要停止旧数据源推数，配置并启动新数据源向应用推数，将应用的数据源从旧数据源切换到新数据源。
确保每个微服务都有适当的访问控制和权限管理机制，以防止未授权的访问和数据泄露。可以使用身份验证和授权技术（如OAuth、JWT）来验证请求的合法性，并在微服务之间进行身份传递。同时，采用适当的网络安全措施，如防火墙、SSL/TLS加密等，保护微服务之间的通信。
长按/截图保存，微信识别二维码
或者关注公众号“华为云”
