系统架构

系统目前支持http,filebeat,rsyslog,bos上传共四种数据传输方式。为了支持高性能的检索和聚合统计功能,采用了分布式elasticsearch集群存储日志解析结果。

主要功能

  • 数据采集

    灵活接入多种数据源,支持各类设备、系统、数据库、业务系统以及平台产生数据及日志,支持实时数据采集和离线数据采集。

  • 数据管理

    提供日志源管理、采集器管理、数据量查询、数据调度管理等功能,支持数据分类存储,对收集的数据进行自动分类处理。

  • 数据模型定义

    用来定义数据的存储结构,并提供完善的元数据描述信息,对数据收集器所收集的数据进行存储,使得后续数据分析业务更加简便,数据存储更加规范,数据计算更加有序合理。

  • 数据拆分

    对数据进行可视拆分,定义出合理完善的数据拆分方案,保留有效数据项。使复杂数据简单化、非结构化数据结构化,帮用户拆分有效数据。

  • 计算方案与数据解析

    用户可自定义解析库名称、解析规则等信息。支持多角度的数据解析库,可以对数据中的元素,直接解析,多角度解析,进而产生更加详细的数据分析报表。

  • 数据检索

    强大的搜索和分析功能,支持对海量日志数据进行查询、分析、检索,充分利用强大的分析搜索功能,快速返回搜索分析结果。

  • 数据可视化

    对信息数据进行详尽的分析及统计的基础上支持丰富的报表,实现分析结果的可视化展现。

主要优势

  • 全私有化部署

    全私有化部署稳定安全、灵活高效、易管理、无需开发与运维投入,提供高可靠的数据和日志收集机制,并提供安全的数据传输方式。

  • 全网日志数据统一管理

    灵活接入与同步多种数据源,业务应用系统可通过webapi方式进行数据采集,通过对海量数据、日志进行管理,使管理员能及时了解端对端的运行情况。

  • 亿级的数据处理能力

    超强的计算处理能力、横向扩展、自由变化伸缩、冷热兼备的特性,每秒可以处理高达50万个消息,日处理消息达10亿以上。

  • 自主建模,高度融合

    提供专业的数据模型建设方案,用户以业务需求为中心自主化的模型建立,一键式建模,贴合多业务场景,满足多对象的业务处理模式。

  • 丰富的数据可视化工具套件

    专业的可视化图表制作工具,多维数据分析、数据挖掘、无限嵌套、强大的可视化搜索工具、定位未追踪数据。形成图表、文字、内容、报告等可视化仪表盘。

  • 多种数据分析形态

    低耦合、高内聚、易扩展的底层大数据分析架构,可适用于安全、运维、营销、生产、渠道、用户、行为、交通、态势等多方面、多角度的数据分析。

获取更多数据分析系统信息

姓名

联系电话

邮箱

公司名称

地址

行业

问题/建议

验证码