行业大数据平台
睿至行业大数据平台——先知系统 通过对企业内部海量数据进行全面采集、识别、存储,结合自身丰富的知识库和人工智能分析引擎,为用户提供强大的数据交互能力。
“先知系统”旨在为各行业解决方案提供底层大数据架构支撑,同时为用户快速提供通用的解决方案, 可显著减轻交付及定制开发人员的压力。
为什么选择睿至?
睿至拥有自主知识产权的大数据分析平台 Zeta (先知)系列,为企业,政府提供一站式的大数据分析。睿至分析平台基础架构使用自身定制的Apache Ambari模块进行超大集群的生命周期管理,根据行业用户及自身产品的需要,在 Hadoop 的基础上,整合添加Apache Flink 作为实时及离线分析引擎,使用 PrestoDB 作为 SQL 引擎,使用 Elasticsearch 作为分布式全文检索引擎。
该平台从最前端的数据采集加工,到离线建模和实时分析均采用横向扩展的架构,从而保证在数据处理过程中随着业务的增长。经过实测:通常在20个节点的集群环境中,先知系统可保证入库性能超过80000EPS,同时并发查询超过1000TPS。
先知系统数据分析处理流程:
行业大数据平台产品核心功能
数据源整合
内置灵活、高效的数据采集器,快速实现多种数据源整合
支持复杂的采集需求和环境
产品提供开放、可扩展的采集框架以及自定义插件标准
智能简单的安装方式,支持基于 web的采集器管理
量数据离线分析
PB级数据秒级处理
提供可视化数据分析,实现自助式业务建模
全面支持在线业务交互分析
时分析及告警
采用 Apache Flink 实时流计算引擎,达到秒级响应
用户可通过 SQL 语句来定义规则进行流式计算
支持 CEP 进行多数据源关联分析
可对接第三方告警平台并且支持告警压缩
文检索及溯源
提供全文检索的能力
支持精确及模糊查询
支持 Lucene 的 Query String 语法
提供多种可选的中文分词及自定义词库
提供秒级的全文检索能力,日处理上百TB数据
全性及数据隔离
基于会话访问,支持https
后台数据权限验证采用 Kerberos,支持RBAC
数据采集传输支持加密压保证用户安全