检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
每添加完一个表的信息后，使用回车键换行。 完成所有表信息的添加后，保存CSV文件的更改。 单击“指定分区迁移文件”下的“添加文件”，将编辑并保存好的CSV文件上传至MgC。 增量区间 选择T-N区间作为增量数据的迁移范围，即任务开始执行时间的前 24 x N 小时内的增量数据。例如：选择T-1，2024/06/06
Spark应用每个Executor的CPU核数。该配置项会替换“sc_type”中对应的默认参数。 numExecutors 1-100 Spark应用Executor的个数。该配置项会替换“sc_type”中对应的默认参数。 executorMemory 1-16 G Spark应用的Executor内存，参数配置例如：2G
在相关设置中，单击“管理语言设置”，打开区域窗口的管理选项卡。 在“非Unicode 程序的语言”框中，单击“更改系统区域设置”，弹出区域设置窗口。 查看当前系统区域设置与当前语言是否一致。如果不一致，在下拉列表中选择与当前语言一致的地区，单击“确定”。 更改完成，请重启计算机，并确认设置是否生效。
不可达。 问题分析 可能导致该问题的原因如下： 源端主机处于关机状态。 源端主机的IP或端口异常。 源端主机有防火墙、杀毒软件等安全拦截。 您可以通过查看MgC Agent（原Edge）的Error日志文件确认具体的报错原因，Error日志文件的存储路径为：C:\Edge\logs\edge-server\error
properties 须知： 建议使用采集器提供的默认规则文件进行采集，如果需要自定义采集规则，请在默认规则文件基础上进行修改。 password 是 填写登录用户名对应的密码。 username 是 填写拥有可读权限的登录用户名。 port 是 填写Nacos的访问端口。例如：8848 ip
保留CSV文件中的第一行不变，从第二行开始，每行填写一个表的迁移信息，格式为“{MC项目名},{表名}”，其中MC项目名代表MaxCompute项目名称，表名代表具体的表名称。 须知： 每行的“MC项目名”和“表名”之间使用英文逗号隔开，不要使用空格或其他分隔符。 每添加完一个表的信息后，使用回车键换行。
fig\config\rules.properties 须知： 建议使用采集器提供的默认规则文件进行采集，如果需要自定义采集规则，请在默认规则文件基础上进行修改。 path 是 填写应用配置文件（yaml文件）的存储路径。 父主题： 采集器参数配置说明
失败或已完成的数据源。 删除采集项失败。 请检查该采集项状态是否为等待中，仅允许删除等待中的采集项。 删除采集任务失败，存在运行中采集项。 刷新采集项列表查看是否存在运行中的采集项，运行中的采集项时不允许删除采集任务。 导入文件的大小超出限制。 请导入10MB以内的文件。 文件名无效。
Spark应用每个Executor的CPU核数。该配置项会替换“sc_type”中对应的默认参数。 numExecutors 1-100 Spark应用Executor的个数。该配置项会替换“sc_type”中对应的默认参数。 executorMemory 1-16 G Spark应用的Executor内存，参数配置例如：2G
csv。 ssl_ca_file 否 使用SSL连接，填写CA证书文件（.pem）路径。建议使用一组特定的CA证书，而不是由知名机构颁发签署的服务器证书。 ssl_client_private_key_password 否 如果证书密钥文件中包含的私钥已加密，则需要填写密码或口令短语。
保留CSV文件中的第一行不变，从第二行开始，每行填写一个表的迁移信息，格式为“{MC项目名},{表名}”，其中MC项目名代表MaxCompute项目名称，表名代表具体的表名称。 须知： 每行的“MC项目名”和“表名”之间使用英文逗号隔开，不要使用空格或其他分隔符。 每添加完一个表的信息后，使用回车键换行。
在创建迁移集群时，会产生以下费用： 创建Master节点、迁移节点和列举节点会产生ECS服务费用。具体计费详情请参见ECS按需计费说明或ECS价格计算器。 如果您使用公网迁移时，会产生NAT网关服务费用。计费详情请参见NAT网关计费说明或NAT价格计算器。 启用LTS服务时，会产生LTS服务费用。具体计
在创建迁移集群时，会产生以下费用： 创建Master节点、迁移节点和列举节点会产生ECS服务费用。具体计费详情请参见ECS按需计费说明或ECS价格计算器。 如果您使用公网迁移时，会产生NAT网关服务费用。计费详情请参见NAT网关计费说明或NAT价格计算器。 启用LTS服务时，会产生LTS服务费用。具体计
填写集群配置文件（yaml文件）的存储路径。 注意： 配置文件所在文件夹仅能存放与采集相关的yaml配置文件，可以存放多个配置文件，但不能存放与采集无关的其它yaml文件。 配置文件内容获取方法如下： 在需要采集的k8s集群服务器上，使用如下命令，将获取到的信息粘贴到一个自建的yaml文件里，再将yaml文件的存储路径填写到此处。
须知： 每行的“MC项目名”和“表名”之间使用英文逗号隔开，不要使用空格或其他分隔符。 每添加完一个表的信息后，使用回车键换行。 完成所有表信息的添加后，保存CSV文件的更改。 将编辑并保存好的CSV文件上传至MgC。 目的端配置 目的端连接 选择创建的目的端DLI 通用队列连接。
配置执行连接时显示所有工作节点的表的最大字节大小。通过将此值设置为“-1”，可以禁用显示。 说明： 当前仅支持运行命令ANALYZE TABLE COMPUTE statistics noscan的配置单元元存储表，和直接根据数据文件计算统计信息的基于文件的数据源表。 spark.sql
C Agent（原Edge）的Windows主机，并确保该Windows主机满足以下要求： 可以连接外网（公网），并检查是否能够访问MgC和IoTDA服务的域名，具体需要检查的域名请查看域名列表。 检查是否已开放MgC Agent（原Edge）需要的端口，所需端口请查看通信矩阵。
C Agent（原Edge）的Windows主机，并确保该Windows主机满足以下要求： 可以连接外网（公网），并检查是否能够访问MgC和IoTDA服务的域名，具体需要检查的域名请查看域名列表。 检查是否已开放MgC Agent（原Edge）需要的端口，所需端口请查看通信矩阵。
配置执行连接时显示所有工作节点的表的最大字节大小。通过将此值设置为“-1”，可以禁用显示。 说明： 当前仅支持运行命令ANALYZE TABLE COMPUTE statistics noscan的配置单元元存储表，和直接根据数据文件计算统计信息的基于文件的数据源表。 spark.sql
数据源采集失败，如何重新采集？ 采集失败的数据源，处理完失败原因后，需要删除后通过新增数据源重新采集。 在任务列表页面，单击采集任务操作列的“查看”，进入任务详情页面。 单击采集项操作列的“新增数据源”，弹出新增数据源窗口。 选择区域和资源类型，单击“确认”按钮。新增数据源成功，系统开始对新增的数据源进行采集。
长按/截图保存，微信识别二维码
或者关注公众号“华为云”
