诺亚大数据操作平台:我们是数据"食材"处理专家 协助厨师做出美味佳肴
作者头像
  • 宋诗林
  • 2020-06-09 17:42:05 0

没有优质的食材,再出色的厨师也无法烹制出绝世佳肴;同样,没有高质量的数据,再优秀的工程师也难以挖掘出大数据的真正价值。李欣(化名)用这个比喻来说明他的观点。他是奇安信诺亚大数据操作平台(简称“诺亚”)的负责人。诺亚是一个专注于简化大数据应用开发过程中数据接入、数据处理、数据存储以及资源调度等方面的大数据业务系统支撑平台。

如今,我们已经步入了大数据时代,但人们对大数据的理解仍存在差异。李欣凭借多年在大数据领域的经验,对此有着独到的见解。他认为,尽管我们已进入大数据时代,但这并不意味着大数据仅仅意味着海量数据。实际上,大数据的“大”不仅体现在量上,还包括数据来源的广泛性、多样性、实时性和不确定性等多方面特征。这些特性决定了如果不妥善处理大数据,就无法充分发挥其潜力和价值。

许多公司都在积极收集数据,并将其集中存储和利用。而诺亚所做的工作则更多集中在后端。它不是一个直接提供大数据各种能力的工具,而是作为一个基于大数据平台的应用套件,能够将这些能力释放出来。李欣以诺亚在网络安全领域的应用为例,形象地描述了它的作用:如果将一家公司比作一个中央厨房,那么诺亚就像是负责处理食材的厨师。它从各个业务部门(如SOC、态势感知、UBA、威胁情报、云监测等)获取各类数据(例如日志、结构化数据、半结构化数据、流量日志等),然后对这些数据进行集中处理(包括数据格式化、转换和清洗等工作)。最终,诺亚将处理好的数据整理好(即进行存储),供其他团队使用,从而实现高效的数据应用。

相较于市场上一些直接使数据与产品对接的产品,奇安信诺亚的工作更加幕后,但却至关重要。“诺亚”专注于简化大数据应用开发过程中的多个环节,使得大数据技术与业务需求更好地分离,确保业务流程不受底层技术更新的影响。它提供了一个配置式的大数据业务开发环境,帮助企业更有效地利用大数据资源。具体来说,诺亚提供了基于大数据技术的高可靠性和高性能的通用数据采集、解析和存储平台,支持从单机到集群的多种部署方案;支持多种日志采集方式,并且预置了多种解析插件,可以通过简单的配置完成复杂的解析任务;还提供了配置和监控界面,以及传输加密和大数据组件认证等安全措施。

目前,奇安信诺亚主要致力于网络安全领域的大数据业务系统支撑,未来还将拓展到更多领域,不仅服务于奇安信公司的大数据平台,也将支持其他更多的大数据平台。

    本文来源:图灵汇
责任编辑: : 宋诗林
声明:本文系图灵汇原创稿件,版权属图灵汇所有,未经授权不得转载,已经协议授权的媒体下载使用时须注明"稿件来源:图灵汇",违者将依法追究责任。
    分享
诺亚大数佳肴quot厨师美味协助做出操作处理
    下一篇