检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
接入数据源 接入DWS数据源 接入Gauss100数据源 接入HANA数据源 接入HIVE数据源 接入MongoDB数据源 接入MySQL数据源 接入Oracle数据源 接入PostgreSQL数据源 接入Redis数据源 接入SQL Server数据源 父主题： 创建并开放数据API
称，进入规则详情页面。 配置规则的数据源端。 单击“数据源端”下的“创建数据源端”，增加一条数据源端配置。 配置数据源端相关信息，完成后单击“保存”。 表2 数据源端配置 参数 配置说明 产品名称 选择设备所属的产品。 设备名称 选择要转发数据的设备，可以选择指定设备或全部设备。
在左侧导航栏选择“资产目录”，在右测搜索框搜索“定时同步”，选择“定时同步MySql中的数据到Oracle”模板，单击“使用模板”。 本实践中MySQL数据源表中的字段与Oracle中数据目标表中的字段类型保持一致。 将MySQL数据表中的aa、bb字段同步到Oracle数据表中的TEST_INTEGE
ElasticSearch的磁盘空间需求取决于数据量、副本数： 一般场景：数据量*(1+副本数)*1.7 峰值场景：数据量*(1+副本数)*2.6 其中，数据量为存储的日志文件总大小，即200MB*日志文件数；本实践中，ElasticSearch的副本数为1。 ElasticSearch存储的数据，默认未设置过
FDI各类数据库支持哪些数据类型？ FDI各类数据库支持的数据类型有： Kafka数据库：string MySQL数据库：integer，bigint，number，varchar，char，float，date，timestamp，datetime Oracle数据库：inte
如果ROMA Connect支持的数据源类型无法接入您使用的数据源，您可以自行开发一个数据源插件，用于实现对数据源的读写。 同时，这个数据源插件以标准RESTful接口形式供ROMA Connect接入，最终实现ROMA Connect对数据源的读写。 这个数据源插件称为连接器，这类通过连接器接入的数据源称为自定义数据源。
源端API类型数据源自定义周期如何设置？ 创建FDI普通任务时，当源端数据源选择API类型并且开启增量迁移时，支持自定义周期，自定义周期配置详细说明可参照以下示例： 当粒度单位为“小时”时，分别有以下四种配置场景。 以时间点2020-11-05 22:10为例，如下图。 周期指定
(YYYY-MM-dd)}，在编辑logstash.conf文件时设置。 在数据视图中查看日志数据和日志统计。 在页面右上角设置查询时间范围，然后单击“Refresh”，可查看该时间范围内的日志数据。 在页面左侧的字段列表中选择要查看的日志字段，筛选包含该字段的日志数据。 在页面右侧的“Break down by
查看数据集成任务 概述 数据集成任务创建后，您可以查看任务的相关信息，包括任务的配置信息、运行日志、操作日志和调度日志等。 您也可以修改任务的配置，修改任务的操作跟创建任务类似，具体配置说明可参见创建数据集成任务。 请谨慎修改您的任务配置信息，避免目标端出现脏数据或者数据集成不完
分和过滤，然后将解析后的日志数据发送到ELK的ElasticSearch进行存储。 ELK的ElasticSearch接收到日志数据后，生成日志数据的索引并存储数据，为Kibana的可视化显示提供聚合搜索和数据分析的支撑。 用户使用ELK的Kibana创建日志视图，基于Logst
数据源连接测试失败排查操作 请检查数据源相关配置是否正确，例如数据库名及密码是否填写错误。 请检查数据源IP与FDI是否在同一个VPC内，若不在请先创建对等连接。 如何创建VPC对等连接请参考VPC对等连接。 请检查数据源服务器端防火墙是否开放连接端口。 请检查数据源服务器端IP白名单限制是否添加FDI数据面IP。
数据源管理 创建数据源 查询数据源 查询指定数据源 修改数据源 删除指定数据源信息 获取数据源中所有的表 获取数据源中某个表中所有字段 测试数据源连通性 测试数据源SQL是否可用 父主题： 数据集成API
如何调用API 构造请求 认证鉴权 返回结果
CLICKHOUSE数据源 FTP：FTP数据源 OBS：OBS数据源 ACTIVEMQ：ActiveMQ数据源 ARTEMISMQ：ArtemisMQ数据源 IBMMQ：IBM MQ数据源 KAFKA：Kafka数据源 MQS：MQS数据源 RABBITMQ：RabbitMQ数据源 HANA：HANA数据源
接入数据源 根据数据源类型的不同，数据源的接入配置有所差异，具体如下表所示。接入数据源后，单击数据源名称可以查看数据源详情，数据源详情中可查看数据源相关的任务信息。 ROMA Connect数据集成适用于异构数据源之间的数据类型转换和按需集成。对于业界主流数据库之间的数据迁移、
指从源端获取到的JSON格式数据中，要集成到目标端的每一个底层key-value型数据元素。 别名：对元数据的自定义名称。 类型：元数据的数据类型，需要与源端数据中对应字段的数据类型一致。 解析路径：元数据的完整路径中，不包含数据根字段的路径部分，具体请参见元数据解析路径配置说明。 元数据解析路径配置说明：
na。 docker restart logstash docker restart kibana 父主题： 使用Filebeat+ELK实现Site协同版实例的API日志监控
创建数据后端 概述 ROMA Connect支持把数据源定义为后端服务，实现从数据源中读写数据，并以API的形式对外开放。 约束与限制 数据源存储的单行数据大小建议不超过2KB，若超过该限制会导致自定义后端响应异常。 当数据源返回numeric类型数据时，如果该数据的小数位精度超
构造请求 本节介绍REST API请求的组成，并以调用IAM的获取用户Token接口说明如何调用API，该API获取用户的Token，Token可以用于调用其他API时鉴权。 请求URI 请求URI由如下部分组成。 {URI-scheme}://{Endpoint}/{resource-path}
配置任务基本信息 概述 通过在ROMA Connect中创建数据集成任务，您可以实现不同数据源之间的数据集成转换。ROMA Connect根据您在数据集成任务中的配置，决定如何将指定的源端的一个数据表中的数据集成到目标端的一个数据表中。 数据集成任务的配置分为任务基本信息、制定计划（可选）、
长按/截图保存，微信识别二维码
或者关注公众号“华为云”
