云服务器内容精选
-
请求参数 表2 请求Header参数 参数 是否必选 参数类型 描述 Authorization 是 String 该字段存储的是Access Token。调用KooDrive的API使用Token认证,拥有Token就代表拥有某种权限,在调用API的时候将Token加到请求消息头中,从而通过身份认证,获得操作API的权限。Access Token的获取请参考对应的开发手册,格式参考:Bearer+{access_token} language 否 String 国际化语言标识,符合i18n规范,如zh-CN表示简体中文,en-US表示美式英语,不传默认美式英语 X-Traceid 否 String 消息日志跟踪id(58位)
-
响应参数 状态码: 200 表3 响应Body参数 参数 参数类型 描述 data UserImportResultDto object 用户批量导入结果 表4 UserImportResultDto 参数 参数类型 描述 successCount Integer 成功数量 failCount Integer 失败数量 failInfoList Array of UserImportFailInfo objects 用户批量导入失败信息 表5 UserImportFailInfo 参数 参数类型 描述 userName String 用户名 desc String 描述
-
测试自动化任务 自动化任务启用成功后,会出现“测试”按钮,单击该按钮可进行自动化测试。 自动化任务启用成功后,单击页面右上方的“测试”。 图3 测试自动化任务 触发条件为“流程事件触发”时(如图4),不支持测试功能,即无测试按钮。 图4 流程事件触发 在弹出的测试页面,选择一条记录,单击“开始测试”。 图5 选择一条记录 触发条件为“定时触发”时(如图6),无需选择记录,即可立即测试(如图7)。 图6 定时触发 图7 测试定时触发自动化任务 执行成功后,单击“跟踪”,可查看自动化任务测试结果。 图8 查看测试结果
-
启用自动化任务 参考登录零代码工作台中操作,登录AstroZero零代码工作台。 在全部应用中,单击应用后的“...”,选择“编辑”,进入编辑应用页面。 单击页面右上角的,进入自动化页面。 在自动化列表中,单击未启用自动化任务后的。 图1 编辑自动化任务 在自动化任务设计页面,单击右上角的“已关闭”,即可启用自动化任务。 “已关闭”状态变为“运行中”,表明自动化任务启用成功。 图2 启用自动化任务
-
请求示例 取消项目ID为b02ce40e8cb84a8e980fdb11fac657db下的ID是3861199d-c196-4791-bcd0-b45fde754f50的定时任务。 DELETE https://{endpoint}/v3/b02ce40e8cb84a8e980fdb11fac657db/scheduled-jobs/3861199d-c196-4791-bcd0-b45fde754f50
-
源端优化 MySQL抽取优化 可通过在作业任务配置参数单击中“添加自定义属性”来新增MySQL同步参数。 图1 添加自定义属性 可使用的调优参数具体如下: 表1 全量阶段优化参数 参数名 类型 默认值 说明 scan.incremental.snapshot.backfill.skip boolean true 全量阶段是否跳过读取binlog数据,默认为true。跳过读取binlog数据可以有效降低内存使用。需要注意的是,跳过读取binlog功能只提供at-least-once保证。 scan.incremental.snapshot.chunk.size int 50000 分片大小,决定了全量阶段单个分片最大数据的数据条数以及分片个数。分片大小越大,单个分片数据条数越多,分片个数越小。 当表的条数过多时,作业会划分较多的分片,从而占用过多的内存导致内存问题,请解决表的条数适当调整该值。 当scan.incremental.snapshot.backfill.skip为false时,实时处理集成作业会缓存单个分片的数据,此时分片越大,占用内存越多,引发内存溢出,在此场景下,可以考虑降低分片大小。 scan.snapshot.fetch.size int 1024 全量阶段抽取数据时,从Mysql侧单次请求抽取数据的最大条数,适当增加请求条数可以减少对Mysql的请求次数提升性能。 debezium.max.queue.size int 8192 数据缓存队列条数,默认为8192,当源表中单条数据过大时(如1MB),缓存过多数据会导致内存溢出,可以考虑减小该值。 debezium.max.queue.size.in.bytes int 0 数据缓存队列大小,默认为0,即表示缓存队列不考虑数据大小,只按照数据条数计算。在debezium.max.queue.size无法有效限制内存占用时,考虑显式设置该值来限制缓存数据的大小。 jdbc.properties.socketTimeout int 300000 全量阶段连接Mysql的socket超时时间,默认为5分钟。当Mysql负载较高,作业出现SocketTimeout异常时,考虑增大该值。 jdbc.properties.connectTimeout int 60000 全量阶段连接Mysql的连接超时时间,默认为1分钟。当Mysq负载较高,作业出现ConnectTimeout异常时,考虑增大该值。 表2 增量阶段优化参数 参数名 类型 默认值 说明 debezium.max.queue.size int 8192 数据缓存队列条数,默认为8192,当源表中单条数据过大时(如1MB),缓存过多数据会导致内存溢出,可以考虑减小该值。 debezium.max.queue.size.in.bytes int 0 数据缓存队列大小,默认为0,即表示缓存队列不考虑数据大小,只按照数据条数计算。在debezium.max.queue.size无法有效限制内存占用时,考虑显式设置该值来限制缓存数据的大小。
-
目的端优化 DWS写入优化 可通过在DWS的目的端配置中修改写入相关配置,且可以通过单击高级配置的“查看编辑”按钮,添加高级属性。 图2 添加高级属性 表3 DWS写入优化参数 参数名 类型 默认值 说明 写入模式 enum UPSERT DWS的写入模式,可在目的端配置中设置,实时处理集成作业推荐使用COPY MODE。 UPSERT:为批量更新入库模式。 COPY:为DWS专有的高性能批量入库模式。 批写最大数据量 int 50000 DWS单次写入的最大条数,可在目的端配置中设置。 当缓存的数据达到“批写最大数据量”和“定时批写时间间隔”之一的条件时,触发数据写入。 单次写入条数增大可以减少请求DWS的次数,但可能导致单次请求时长增加,同时也可能导致缓存的数据增加进而影响内存使用。请综合考虑DWS规格和负载, 适当调整该值。 定时批写时间间隔 int 3 DWS单次写入的时间间隔,可在目的端配置中设置。 当缓存的数据达到定时批写时间间隔的条件,触发数据写入。 增大该值有助于增加单次写入时缓存的数据条数,但由于写入频率降低,会提升DWS数据可见的时延。 sink.buffer-flush.max-size int 512 DWS单次写入的数据大小,默认为512MB,可在目的端配置的高级配置中设置。 当缓存的数据达到数据大小限制时,触发数据写入。 与批写最大数据量类似,单次写入大小增大可以减少请求DWS的次数,但可能导致单次请求时长增加,同时也可能导致缓存的数据增加进而影响内存使用。请综合考虑DWS规格和负载, 适当调整该值。
-
实例同步日志说明 “实例同步状态”统计的是实例同步成功率。当该状态显示“暂无数据”,则表示未同步数据,可能是实体未发布或模型初次同步失败等原因导致。 单击“实例同步状态”链接,弹出实例同步日志窗口。该弹窗展示的是xDM-F实体对应的实例数据入图调度执行情况。 图2 实例同步日志示例 图2中的调度执行状态的含义,详细说明请参见表2。 表2 调度执行状态含义说明 调度执行状态 说明 同步成功 表示实例数据入图成功。 同步失败 表示实例数据入图失败,请单击打开调度详情页查看错误信息。 暂停 表示由于存在待调度或调度中的实例调度任务,所以增量同步已被暂停。待任务调度完成,系统将为您自动恢复同步被暂停的实例数据。 阻塞 表示当前模型尚未更新,导致实例数据同步被阻塞。以下情况下实例数据同步会受阻。 如果xDM-F模型新增了关联属性或唯一键属性,或是新增属性的“入图”值为是,但LinkX-F中未同步xDM-F实体变更信息,此时实例数据同步受阻。 如果xDM-F模型属性对应的“入图”值有修改,但LinkX-F中未同步xDM-F实体变更信息,此时实例数据同步受阻。 如果想同步阻塞期间的实例数据,需在七天内执行同步实体变更信息操作。待模型更新后,系统将为您自动恢复同步被阻塞的实例数据。相关操作请参见: 同步xDM-F数据实体变更信息 同步xDM-F关系实体变更信息 如有需要,您还可: 筛选调度日志:在“执行开始时间”选择开始时间和结束时间,单击“搜索”。 查看调度日志执行详情:单击具体日志的“操作”列处的,在弹窗中查看调度执行进展、消息解析详细信息和入图详细信息等。 如果消息解析失败,单击“错误信息”列处的,查看错误详情。
-
多源数据入图属性规则说明 同一实体支持多个源端关系型数据库映射,您可为同一实体的不同属性分别配置不同表字段的映射。然后使用不同的映射分别配置入图任务进行入图,实现多源数据的融合。 数据实体维护关系型数据映射具体操作请参见配置关系型数据库映射(源端映射)。 关系实体维护关系型数据映射具体操作请参见配置关系型数据库映射(源端映射)。 此处,以一个简单例子做说明,具体如下: 一个实体除ID外有5个属性,即Attribute1、Attribute2、Attribute3、Attribute4、Attribute,按如下规则映射: 源端关系型数据库映射1针对ID、Attribute1、Attribute2三个属性和表里的字段id、attr1、attr2做了映射。 源端关系型数据库映射2针对ID、Attribute3、Attribute4、Attribute5四个属性和表里的字段id、attr3、attr4、attr5做了映射。 实例数据入图后,实体ID为1的实例,同时具有两个不同源端关系型数据库中相对应的属性值。 图2 多源端实例数据入图属性组合规则
-
支持查看的任务 表1 支持查看的任务 任务类型 分类 任务名称 即时任务 创建实例 创建SQL Server实例、创建SQL Server只读实例。 实例生命周期 重启SQL Server实例、停止SQL Server实例、开启SQL Server实例、删除SQL Server实例。 变更实例 扩容SQL Server实例、SQL Server实例主备倒换、克隆SQL Server实例、SOL Server单实例转主备、SQL Server规格变更、SQL Server磁盘类型变更、SQL Server实例迁移可用区、SQL Server修改字符集。 连接管理 SQL Server创建公网 域名 、SQL Server修改公网域名、SQL Server创建内网域名、SQL Server修改内网域名、SQL Server实例绑定弹性公网IP、SQL Server实例解绑弹性公网IP、SQL Server更新SSL证书。 备份与恢复 SQL Server恢复到新实例、SQL Server恢复到已有实例。 开启FileStream存储 SQL Server开启FileStream。 安全与加密 SQL Server开启TDE、SQL Server滚动TDE证书。 定时任务 实例生命周期 开启SQL Server实例、SQL Server实例系统升级。
-
URI URI格式 GET /v3/{project_id}/instances/{instance_id}/tasklist/detail?start_time={start_time}&end_time={end_time} 参数说明 表1 参数说明 名称 是否必选 说明 project_id 是 租户在某一Region下的项目ID。 获取方法请参见获取项目ID。 instance_id 是 实例ID。 start_time 是 开始时间,格式为UTC时间戳。 end_time 否 结束时间,格式为UTC时间戳。
-
后续管理 运维任务创建完成后,可在任务列表页面,管理已创建任务,包括管理关联执行账户、删除任务 、启停任务、立即执行任务等。 若需补充关联执行账户,可单击“关联”,快速关联执行账户、账户组。 若需删除任务,可一个或多个选择目标任务,单击“删除”,立即删除任务。 若需禁用任务的周期执行,可勾选一个或多个“已启用”状态的任务,单击“禁用”,任务状态变更为“已禁用”,任务立即失效。 若需立即执行任务,可单击“立即执行”,立即执行运维任务。 任务执行过程中,按照任务步骤依次执行。当一个任务步骤被中断或所选资源不可达时,后续任务步骤将被终止不再执行。
-
适用场景 适用于单个桶数据量不超过3 TB或对象个数不超过500万的 对象存储迁移 场景,通过创建对象存储迁移任务,可将对象数据进行快速迁移。 如果单个桶数据量大于3 TB或对象个数大于500万,建议您创建迁移任务组来进行迁移。 OMS 默认会将等待超过30天未调度的任务自动设置为失败,并且会自动清除该任务的AK/SK。为防止大量任务阻塞在等待中,请控制创建任务的频率。 如果单个对象大小超过500G,建议您通过提交工单的方式,开通并发分片白名单配置,提升迁移速率。 在迁移过程中,系统将自动在目的端桶创建一个名为“OMS”的临时文件夹。严禁手动操作此文件夹,包括但不限于修改、删除或添加内容。对该文件夹进行的任何手动操作都可能导致迁移流程中断或失败。
-
前提条件 已 注册华为账号 并开通华为云,完成实名认证。 已获取源端和目的端账号的AK/SK。 源端桶对应账户需要的权限包括:列举桶,获取桶位置,列举对象,获取对象元数据,获取对象内容。获取方式参见源端桶权限获取。 目的端桶需要的权限包括:列举桶,获取桶位置,列举对象,获取对象元数据,获取对象内容,上传对象,列举已上传段,取回归档存储对象。获取方式参见目的端桶权限获取。 已在OBS服务中创建桶。 您过去24小时内已创建的迁移任务未满1000000个。 您名下处于“等待中”状态的迁移任务未满1000000个。
-
前提条件 已注册华为账号并开通华为云,完成实名认证。 已获取源端和目的端账号的AK/SK。 源端桶对应账户需要的权限包括:列举桶,获取桶位置,列举对象,获取对象元数据,获取对象内容。获取方式参见源端桶权限获取。 目的端桶需要的权限包括:列举桶,获取桶位置,列举对象,获取对象元数据,获取对象内容,上传对象,列举已上传段,取回归档存储对象。获取方式参见目的端桶权限获取。 已在华为云OBS服务中创建桶。 您过去24小时内已创建的迁移任务未满1000000个。 您名下处于“等待中”状态的迁移任务未满1000000个。 您名下处于“同步中”状态的同步任务未满5个。
更多精彩内容
CDN加速
GaussDB
文字转换成语音
免费的服务器
如何创建网站
域名网站购买
私有云桌面
云主机哪个好
域名怎么备案
手机云电脑
SSL证书申请
云点播服务器
免费OCR是什么
电脑云桌面
域名备案怎么弄
语音转文字
文字图片识别
云桌面是什么
网址安全检测
网站建设搭建
国外CDN加速
SSL免费证书申请
短信批量发送
图片OCR识别
云数据库MySQL
个人域名购买
录音转文字
扫描图片识别文字
OCR图片识别
行驶证识别
虚拟电话号码
电话呼叫中心软件
怎么制作一个网站
Email注册网站
华为VNC
图像文字识别
企业网站制作
个人网站搭建
华为云计算
免费租用云托管
云桌面云服务器
ocr文字识别免费版
HTTPS证书申请
图片文字识别转换
国外域名注册商
使用免费虚拟主机
云电脑主机多少钱
鲲鹏云手机
短信验证码平台
OCR图片文字识别
SSL证书是什么
申请企业邮箱步骤
免费的企业用邮箱
云免流搭建教程
域名价格