检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
MgC进行数据一致性校验的步骤和方法。 准备工作 需要先在源端内网环境中安装用于配合数据校验的工具MgC Agent（原Edge）并注册用户，方法请参见安装Linux版本的MgC Agent。 需要将源端和目的端所有节点的主机名和IP地址映射添加到安装MgC Agent主机的/etc/hosts文件中，配置连接才能连接成功。
需要使用“存储账户”和“密钥”作为采集凭证，本节介绍获取Azure“存储账户”和“密钥”的方法。 登录 Azure 门户中转到存储账户。 在左侧导航栏选择“安全性和网络 > 访问密钥” ，即可看到“存储账户名称”和“密钥”。 在“key1”下单击密钥后的“显示”按钮，即可显示访问密钥，并出现复制按钮。
参数 设置 允许的服务 选择至少包含：Blob。 允许的资源类型 选择至少包含：容器和对象。 允许的权限 选择至少包含：读取和列表，如果要迁移归档类对象权限则需要再勾选：写入。 开始和到期日期/时间 需要确保在迁移任务过程中，连接字符串不会失效。 单击“生成SAS和连接字符串”，即
Windows主机，请添加Administrator账号和密码作为采集凭证。 操作步骤 登录迁移中心管理控制台。在左侧导航栏的项目下拉列表中选择创建的应用迁移项目。 单击左侧导航栏的“源端发现>资源采集”，进入资源采集页面。 在主机资源列表，单击列表上方的“添加资源”按钮，弹出添加主机窗口。 图1
MgC为多种大数据计算/存储引擎，如Hive、Hbase、Doris和MaxCompute等，提供了一致性校验方法。通过一致性校验，您可以更加放心地进行大数据迁移操作，确保数据的准确性和可靠性，从而避免了数据丢失或不一致的风险。 注意事项 创建的源端统计任务和目的端统计任务的统计方式必须保持一致。 数据量较大时，对数成功率99
或端口不通。 问题分析 可能导致该问题的原因如下： 源端主机的IP或端口异常。 如果源端为Windows主机，可能未开启WinRM服务。 您可以通过查看MgC Agent（原Edge）的深度采集日志文件确认具体的报错原因，深度采集日志文件的存储路径为：C:\Edge\tools\
s-netstat\config\nodes.csv。 如果使用自定义的配置文件，请参考默认配置文件（nodes.csv）创建新的csv文件。该参数填写新建的csv文件存放路径。 须知： 建议使用采集器提供的默认节点接入配置文件进行采集，如果需要自定义配置文件，请参考默认配置文件（nodes
存储迁移的约束与限制有哪些？ 使用迁移中心进行存储迁移的约束与限制参见表1和表2。 表1 存储迁移通用约束与限制 类别 约束与限制 多版本对象迁移 默认只迁移源端多版本对象中的最新版本，不支持迁移历史版本的对象存储数据。 目的端桶存储类别 目的端桶的存储类别只能为标准存储或者低频
Eureka采集器（app-discovery-eureka） 通过Eureka提供的开发API，采集Eureka Server和Eureka Client的相关信息。参数配置说明参见表1。 表1 Eureka采集器参数配置说明 参数 必选 配置说明 output_path 否
跨云成本分析支持哪些云厂商？ 目前支持的源端云厂商和资源范围如下表。 源端云厂商 源端资源类型 华为云资源类型 AWS EC2 ECS EBS EVS 阿里云 ECS ECS EBS EVS 部分EBS产品规格，由于计算方式差别较大，源端和华为云都忽略了IOPS以及突发性吞吐相关
储数据的高效迁移。 约束与限制 关于存储迁移的约束与限制请查看存储迁移的约束与限制有哪些？ 源端为阿里云OSS：当源端对象的存储类型是深度冷归档存储时，无法使用MgC提供的解冻归档数据功能直接迁移，需要在源端先手动解冻后再迁移。 风险提示 在创建工作流时，对于源端和目的端的同名对
影响小对象迁移速度的关键因素有哪些？ 在迁移小对象的过程中，以下是一些可能影响小对象迁移速度的因素以及相应的建议： 迁移集群的CPU负载：集群的CPU负载过高，可能会减慢处理小对象迁移的速度。 建议：优化集群的CPU资源分配，或者增加更多的迁移节点来分散负载。 源端和目的端的QPS限制：
在使用大数据校验功能前，请务必先完成以下必要的准备工作。 创建项目 通过创建独立的项目，可以将不同的操作场景进行区分和隔离，从而实现更好的组织管理和资源分配。创建方法请参考项目管理。 准备迁移工具Edge 在启用大数据校验功能前，需要先在源端环境中安装用于配合大数据校验的迁移工具Edge。大数据校
事件记录 MgC Agent（原Edge）提供了一系列日志记录和事件审计功能，允许用户通过控制台界面和日志文件查看和了解操作行为，并进行错误排查和资源定位。 功能介绍 日志记录：系统会生成详细的操作日志，日志文件存储于：{MgC Agent安装路径}/logs/audit/audit
细检查并确保任务类型与队列类型相匹配。 元数据迁移与库的数量 在进行元数据迁移时，MgC会根据识别到的源端数据库的数量，在DLI中自动创建相应的库。如果是整库迁移，通常只会创建一个库；而表迁移可能需要创建多个库。通常，DLI的库数量上限为10。如果DLI空间不足，可能会导致元数据
table"，需要您手动删除DLI中的分区数据，然后再进行迁移。 在进行指定分区数据迁移的场景下，由于MaxCompute在创建表时会自动将表名转换为小写，因此在迁移过程中，请确保Excel文件中的库表名称与MaxCompute中的实际表名一致（全部小写）。如果Excel文件中填写的库表名称为大写，
则此选项无效。 ca 是 CA证书文件的路径。 cert 是 客户端证书文件的路径。 key 是 客户端私钥文件的路径。 cipher 否 要使用的加密算法。 check_hostname 否 如果设置为True，则在SSL连接时验证服务器的主机名。如果未指定证书，则此选项无效。
脚本执行机环境配置 确保执行脚本的Linux主机上安装了以下必要的工具和命令： SSH工具：用于建立与远程主机的安全连接。 sed工具：用于编辑和修改/etc/hosts文件内容。 setsid命令：用于在SSH连接中避免交互需求（通常用于避免密码输入时的交互）。 mktemp命令：用于创建临时文件或目录。
与应用间的关联关系。目前支持发现的源端云平台为：阿里云、华为云、AWS、腾讯云、Azure、七牛云、金山云。 阿里云和华为云支持采集的资源类型包括：主机、容器、中间件、数据库、网络和存储。 腾讯云支持采集的资源类型包括：主机、数据库、存储。 AWS和Azure支持采集的资源类型包
卸载Windows版本 请根据安装MgC Agent的Windows主机操作系统版本，选择适合的卸载方法。 需要将安装的MgC Agent应用程序和msi安装程序一同卸载。 方法一 在“开始”菜单中，单击“控制面板”，进入控制面板主页。 单击“程序和功能”，部分系统为“卸载程序”，进入卸载或更改程序页面。
长按/截图保存，微信识别二维码
或者关注公众号“华为云”
