东软金融应用交易日志监控解决方案

现状及问题

近年来，各金融机构业务规模迅速增长，作为底层的技术支撑，生产系统的集群规模越来越大,运维难度也逐步增加。经过大量调研发现，大部分金融机构尽管已实现了各业务系统软硬件方面的全网监控，也实现了统一运维管理，但还是处于被动运维管理模式，对信息系统的健康程度了解不够深入，也不能快速排查应用系统处理交易异常的主要原因。因此，金融机构需要以业务应用交易为核心，升级整合传统的 IT 运维监控系统，建立以全局监控、自助化查询、快速处置为一体的整体解决方案。而其中，将生产系统所产生的日志进行集中归集，并利用日志进行监控和深度挖掘是最核心的环节。

然而,目前大部分中型以下金融机构还停留在人工处理日志层面，日志分析时需要逐台登陆服务器搜索相关日志文件才能定位问题，工作量大、效率低、安全性差，而且普遍存在以下几个痛点：

日志数据量大，产生速度很快
日志分散繁杂，通常散落在基础设施各处
缺少关联分析手段，只做事后分析利用
日志分析时效性低

总体规划

针对以上问题，东软 SaCa DataInsight 日志大数据平台产品提供了日志采集、预处理、存储、查询、分析、告警及可视化展现等一系列功能服务，支持系统全局监控、业务拓扑展现、交易日志关联、智能告警以及故障自愈等功能。需要特别说明的是，产品为了满足对海量日志的实时采集、查询及分析需求，采用了分布式部署架构，在技术实现上可以支持灵活地按需部署。数据预处理、查询分析以及控制模块可以按需的分布在相同或者不同的服务器中，并且各模块内也可以根据数据处理规模来横向伸缩扩展。

SaCa DataInsight 交易日志监控包含如下功能：
产品支持收集各类系统的日志数据，按照统一的标准进行加工处理、存储。

通过产品自定义开发的关联引擎可以自动发现业务应用系统拓扑关系和交易访问路径，进行故障应用系统或故障应用节点的自动定位处理，更直观的展现各系统的交易量、成功率、响应时间等交易指标。

通过业务流程查询引擎，对比交易路径或应用拓扑图上不同应用系统的总量/分量交易指标的变化情况，将故障自动定位到某个应用系统甚至服务器节点，减少排除故障时间。