检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
监控分析”。 开启日志分析。 在“日志分析”页签单击“配置访问日志”。 在配置访问日志弹窗配置日志接入信息，完成后单击“确定”。 表1 配置访问日志 参数 说明 启动日志记录 选择是否启用日志记录，仅启用后才能查看API的调用日志。 日志组 选择日志流所在的日志组。 如果没有可选的日志组，单
API分析”。 开启日志分析。 在“日志分析”页签单击“配置访问日志”。 在配置访问日志弹窗配置日志接入信息，完成后单击“确定”。 表1 配置访问日志 参数 配置说明 启动日志记录 选择是否启用日志记录，仅启用后才能查看API的调用日志。 日志组 选择日志流所在的日志组。 如果没有可选的日志组
查询单个任务的日志详情 功能介绍 查询单个任务的所有日志信息。 调试 您可以在API Explorer中调试该接口，支持自动认证鉴权。API Explorer可以自动生成SDK代码示例，并提供SDK代码示例调试功能。 URI GET /v2/{project_id}/fdi/in
在数据视图中查看日志数据和日志统计。 在页面右上角设置查询时间范围，然后单击“Refresh”，可查看该时间范围内的日志数据。 在页面左侧的字段列表中选择要查看的日志字段，筛选包含该字段的日志数据。 在页面右侧的“Break down by”处选择日志字段，可查看该字段的聚合统计数据。
日志采集 “日志采集”处理器用于自定义日志信息，并显示在当前任务的运行日志中（日志级别为Debug）。 配置参数 参数 说明 日志信息 设置日志内容，可使用常量，也可通过变量的方式引用前序步骤中的数据，具体请参考引用变量。 父主题： 处理器
查看审计日志 概述 云审计服务（Cloud Trace Service，CTS）可以记录ROMA Connect相关的操作事件，便于日后的查询、审计和回溯。 开通了云审计服务后，系统开始记录ROMA Connect资源的操作。云审计服务管理控制台保存最近7天的操作记录。 开通云审计服务
）分隔，支持使用*进行通配设置。 日志包含请求Body体信息：勾选后，日志中会携带API请求的Body体信息。 响应数据 推送的日志中，需要携带的API响应信息。 日志包含响应头域信息：勾选后，需填写日志中要携带的响应Header参数。多个字段间使用英文逗号（,）分隔，支持使用*进行通配设置。 日志包含响应
Kafka日志推送插件说明 概述 ROMA Connect支持收集服务集成下已开放API的调用日志信息。Kafka日志推送插件提供了把API的详细调用日志推送到Kafka的能力，方便用户获取API的调用日志信息。 使用限制 同一个API在同一个环境中只能绑定一个相同类型的插件策略，已被API绑定的插件策略无法删除。
10个新日志文件为例，Filebeat和ELK对服务器的资源需求如表1所示。 表1 服务器资源需求 组件 日志文件数 CPU 内存 磁盘 Filebeat 5个 1核 256MB 当Filebeat已读取日志，但尚未发送至其它组件前，会把日志数据缓存到磁盘中，因此磁盘占用为已读取
查询单次调度日志详情 功能介绍 查询单次调度的日志详情。 调试 您可以在API Explorer中调试该接口，支持自动认证鉴权。API Explorer可以自动生成SDK代码示例，并提供SDK代码示例调试功能。 URI GET /v2/{project_id}/fdi/insta
使用Filebeat+ELK实现Site协同版实例的API日志监控 方案概述 资源规划 准备Docker环境和镜像 修改Filebeat和ELK配置 部署Filebeat和ELK 配置索引生命周期策略（可选） 使用Kibana查看日志
ELK部署在独立服务器中，ELK的Logstash接收到日志数据后，根据设置的过滤解析规则，对日志数据进行拆分和过滤，然后将解析后的日志数据发送到ELK的ElasticSearch进行存储。 ELK的ElasticSearch接收到日志数据后，生成日志数据的索引并存储数据，为Kibana的可视化显示提供聚合搜索和数据分析的支撑。
录等日志信息。 表1 日志字段说明 字段 说明 时间 日志的上报时间。 日志级别 日志的级别，分为Info、Error和Debug几种级别。 ID 工作流ID。 详情 日志的具体内容信息。 父主题： 组合应用管理
其中，log目录用于存储Filebeat收集到的日志数据以及其它元数据信息，即使容器Filebeat被删除并重新启动，会继续读取该目录中的内容（如registry），并在收集数据时更新该目录，这样可确保Filebeat只收集新的日志数据，避免将已经发送过的数据再次发送。 执行以下命令为log目录配置权限。
es.p12 pass "" 若要求输入密码，则输入与修改ELK配置时设置的密码一致。 执行以下命令新增用户。 bin/elasticsearch-users useradd username 其中，username设置为与修改ELK配置时设置的用户名一致。 在新增用户后，会自动
Name：模板名称，自定义。 Index pattern：使用通配符形式匹配多个日志索引，例如“site_access_log_*”，表示匹配以site_access_log_开头的所有日志索引文件。 日志索引的名称格式为site_access_log_{es_index_name}_{current_date
在要监控日志的Site协同版实例上，单击站点名称，打开站点信息弹窗。 在弹窗中单击边缘节点的名称，进入该边缘节点的详细信息页面。 在节点信息页面单击“应用”页签，如果存在名称为“shubao-xxxxxx”的容器应用，则该节点为SHUBAO组件所在节点，记录该节点的IP地址。 重复步骤1
磁盘容量申请超过业务量 * 副本数的2倍，即保留磁盘空闲50%左右。 业务进程JVM内存使用确保无频繁FGC，否则会阻塞消息的生产和消费。 建议在Kafka客户端侧配置日志转储，否则容易引起磁盘被日志打满的情况。 一个消费组下的消费者在连接同一个MQS时，最多允许该消费组下的500个消费者进行连
Development Kit。 Python：2.7或3.X版本的Python。 Go：1.14及以上版本的Go。 C#：6.0及以上版本的.NET。 客户端版本使用建议： ROMA Connect的Kafka版本 Kafka客户端建议版本 1.1.0 Java：1.1.0及以上版本 Python：2
配置SQL Server CDC 源端数据源中CDC归档日志的保留时间需要大于集成任务解析的日志时间，否则会造成集成任务找不到归档日志而导致增量同步失败。因此，数据集成任务停止运行的时间不宜过长。建议最少保留2天以上的归档日志。 在首次执行数据同步期间，建议不要对源端数据库做DDL操作。
长按/截图保存，微信识别二维码
或者关注公众号“华为云”
