《检测数据抽取与分析应用系统》工业检测设备可以输出大量的与产品质量相关的数据,并以日志文件的形式保存在文件系统中。本系统可以从这些日志中抽取数据并进行分析应用,对于产品质量体系建设和生产效率的提升带来巨大价值。
系统特点
- 支持配置式地解析各种不同格式的文本文件
本系统通过配置来建立文本抽取规则,不需要二次开发任何程序即可抽取数据。
系统以段、行、变量等配置对日志进行多级解析和抽取。
解析过程如下:
创造性地提出段解析的概念。以多行为一个段,段下面还可以嵌套子段。从而将复杂文本分成有规律有语义的多个部分。
在段里面,设置对行的解析规则,找到符合规则的行,从而获得有意义的行数据。
在行数据里面,还可以进一步解析出多个变量;在一个变量里面,也可以进一步解析出更细的下级变量,从而获得完整的检验检测数据。
- 以Json格式存储解析后的检验检测数据
日志内容抽取以后,以Json的格式进行组合,并存储到时序数据库。数据呈现树状结构,方便查询和分析。
- 支持对Json格式的数据配置报警阈值
对于数值类型的数据,可以配置上下限,超限可自动发出报警信息。
独创的段解析功能
目前市场上的日志解析软件都只有行解析的功能,不具备段解析功能。本系统的段解析功能才能真正对复杂的检验检测数据进行不失真的解析,保持其数据与数据之间的准确关系。
Json格式的数据存储以及灵活的组合条件查询
数据解析以后再以Json格式进行组合,从而准确完整地保存了数据里面不同字段之间的关系。同时提供系统强大的查询接口,可以对所有字段,根据需要设置组合查询条件,进行数据查询和统计。