云架构中心-基于LTS采集多类端侧日志,问题全链路追踪分析和业务运营分析

时间:2024-07-19 11:31:25

基于LTS采集多类端侧日志,问题全链路追踪分析和业务运营分析

某公司核心业务专注于IT信息传播、技术交流、教育培训和专业技术人才服务。拥有超过3200万注册会员、超过1000家企业客户及合作伙伴。

客户痛点:

  • 端侧采集工具不统一,不支持自定义 域名 上报,问题定位复杂

Web、IOS、安卓、百度小程序、微信小程序等多类端侧日志无法使用同一家厂商工具采集,问题定位分析时,需在多个工具间需来回切换,增加了定位复杂度,且无法自定义日志上报的服务端域名,合规性受到部分用户质疑

  • 端侧日志上报慢且易丢失:上报速度小时级,也极易出现丢失,对问题端到端定位分析、业务完整性分析均造成一定影响
  • 业务挖掘分析难:日志数据无法直接写入 DLI ,需投递到Kafka后,再被DLI消费,链路长,且成本高

解决方案

业务价值:

  • 端侧日志全面采集接入,自定义域名上报:集成LTS提供的多端SDK,全面采集端侧日志,接入LTS,且支持上报服务端域名自定义,在用户面保持了业务一致性与合规性,降低了问题定位复杂度,提升了运维效率
  • 端侧日志数据毫秒级上报,数据0丢失:端侧采集日志后,毫秒级完成上报,且无数据丢失,支撑客户快速完成从前端到后端对问题做全链路追踪分析,同时,也支持对业务做完整性分析
  • 便捷低成本获取日志,助力业务挖掘分析:DLI-Flink简易集成Connector,定点从LTS实时消费日志,做实时业务计算分析;简易化配置LTS日志转储到OBS,供DLI快速从OBS读取日志,做离线业务计算分析
support.huaweicloud.com/usermanual-architecture/architecture_06_0051.html