检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
failed 问题描述 进行大数据数据迁移时，部分表迁移失败，报错：CRC Check failed 解决方法 通过修改DLI作业中迁移sql，将源端timestamp字段类型转成String类型，进行数据迁移。 父主题： 大数据数据迁移
MySQL-generallog采集器（app-discovery-mysql-generallog） 通过MySQL的general-log日志，采集客户端host和port信息。参数配置说明参见表1。 表1 MySQL-generallog采集器参数配置说明 参数 必选 配置说明
CA证书所在路径。 Linux系统MySQL证书默认存放位置取决于MySQL的安装方式和版本。通常MySQL证书存放在以下位置： MySQL 5.6及以下版本：/etc/mysql/ MySQL 5.7及以上版本：/var/lib/mysql/ 如果是云数据库，请参考各云厂商数据库的说明文档：
7976931348623157E308 和 -1.7976931348623157E308 时 sum 统计结果显示未达标。 问题分析 使用spark-sql 客户端，进行sql操作，出现用同一个命令存在返回值不同的情况。 这是因为在进行大数据对数的求和计算时，由于分布式计算顺序的不确定性，可能会导致计算
”按钮，弹出选择迁移工具窗口。在下拉列表中，选择步骤3.与迁移中心连接成功的Edge。 在进行大数据校验时，请确保迁移工具Edge一直处于在线并启用状态。 在功能入口区域，单击“表管理”，进入表管理页面的表组页签。 单击“新增表组”，弹出新增表组窗口。根据新增表组参数说明，配置参数后，单击“确认”按钮，创建表组。
数据采集架构 迁移中心（MgC）采集数据的方式主要包括以下两种： 利用Edge远程在线采集 通过调用API在线采集云平台资源 利用Edge远程在线采集 适用于公有云、私有云（如VMware、Hyper-V等虚拟化环境）以及数据中心（IDC）部署，或者以上部署方式的混合场景。迁移中心
支持规格评估的数据库类型 目前支持规格评估的数据库类型包括：MySQL、PostgreSQL、MongoDB、Oracle和SQL Server。 父主题： 规格评估
a/client/bigdata_env， 如果该参数不为空，则环境变量文件在命令执行前将被自动“source” SQL文件地址 填写用于存放执行作业时生成的SQL文件的文件夹地址。您需要拥有该文件夹的读写权限。 须知： 迁移完成后，您需要手动清理该路径下生成的文件夹，以释放存储空间。
需要手动填写项目ID。项目ID的获取方法请参考获取项目的名称和ID。 队列名称 输入完成准备工作时，创建的SQL队列名称/通用队列名称。 当配置SQL队列连接时，填写SQL队列名称。 当配置通用队列连接时，填写通用队列名称。 创建目的端连接完成后，在连接管理页面，可以查看已创建的
选择迁移工具窗口。在下拉列表中，选择在完成准备工作时与迁移中心连接成功的Edge。 在进行大数据数据迁移时，请确保迁移工具Edge一直处于在线并启用状态。 启用迁移工具Edge后，单击页面右上角的“创建源端连接”按钮，右侧弹出创建连接窗口。 连接类型选择“MaxCompute”，单击“下一步”。
具窗口。 在下拉列表中，选择与迁移中心连接成功的Edge。 如迁移工具状态为“在线”、“已启用”，代表该工具已被用于对数相关操作，单击“确定”按钮，继续使用该工具进行后续操作。 如迁移工具状态为“在线”、“未启用”，代表该工具尚未被用于对数，单击“启用”按钮，启用该工具进行后续操作。
目下拉列表中选择迁移项目，即可查看当前项目下的所有Edge设备以及设备状态。 设备状态说明参见下表。 表1 设备状态说明 设备状态 说明 在线 Edge与MgC控制台之间一直连接，无断开。 离线 Edge运行程序退出与MgC控制台之间的连接断开1分钟后，置为“离线”状态。 未激活
容器资源需要完成深度采集后，才可以进行迁移方案设计。 中间件、数据库、存储等资源可直接进行迁移方案设计。支持对AWS RDS（包括MySQL、MariaDB、Aurora、PGSQL、SQLServer、Oracle）和AWS DocumentDB数据库进行深度采集，以获取数据库更详细的信息。 对象存储资源可以进行深度采集和迁移方案配置。
容器资源需要先完成深度采集，再进行迁移方案设计。 中间件、数据库、存储等资源可直接进行迁移方案设计。支持对AWS RDS（包括MySQL、MariaDB、Aurora、PGSQL、SQLServer、Oracle）和AWS DocumentDB数据库进行深度采集，以获取数据库更详细的信息。 对象存
勾选需要导出的信息，单击“确定”，导出所有Bucket资源清单。 导出阿里云RDS MySQL实例 登录阿里云RDS控制台。 在左侧导航栏选择“实例列表”，进入实例列表页面。在页面上方选择地域。 通过数据库类型列过滤出所有MySQL类型的实例，单击列表右上角的图标。 在弹出的对话框中，勾选需要导出的
勾选需要导出的信息，单击“确定”，导出所有Bucket资源清单。 导出阿里云RDS MySQL实例 登录阿里云RDS控制台。 在左侧导航栏选择“实例列表”，进入实例列表页面。在页面上方选择地域。 通过数据库类型列过滤出所有MySQL类型的实例，单击列表右上角的图标。 在弹出的对话框中，勾选需要导出的
连接中 等待master节点上线，并开始创建和安装其他节点 健康 所有节点均处于在线状态 亚健康 部分迁移节点和列举节点在线，并且至少存在一个迁移节点和一个列举节点在线 不可用 所有迁移节点或列举节点不在线 离线 master节点离线，可能是网络中断、ECS删除等原因，请排查Vpcep
据时只会读取源端数据，不会对源端数据进行修改。并提供了“导入本地文件”与“在线采集”两种采集方式。 数据传输 迁移中心为了确保数据传输安全，采用加密通道（HTTPS、SSH）进行数据传输。 凭证加密 在线采集时，采集凭证会加密存储在MgC服务端。用户也可以通过在源端部署Edge实
MgC分为部署在云上的云服务和部署在客户网络中的Edge两个部分。 MgC：部署在云上，主要包含六个业务功能(问卷&TCO对比、在线采集、应用关联分析、在线评估、资源分组、迁移编排)，通过基于服务开发服务，基于服务运维服务的方式进行设计。 Edge：部署在客户的网络中，用来保存凭证
采集时长受控：采集任务在有限的时间内完成，采集避免长时间占用系统资源。 加密保存凭证：所有用于数据采集的凭证都经过加密处理，以保护凭证的安全。线上采集的凭证仅在线上环境中保存。 操作权限与最小权限原则：无论哪种采集方式，都需要具备相应的操作权限，并且遵循最小权限原则，即只授予完成特定任务所需的最小权限。
长按/截图保存，微信识别二维码
或者关注公众号“华为云”
