近期,偶数公司推出了其最新的实时湖仓数据平台——Skylab 5.3版本,这一版本涵盖了包括云原生分布式数据库OushuDB、数据分析与应用平台Kepler、数据资产管理平台Orbit、自动化机器学习平台LittleBoy、数据工厂Wasp、数据开发与调度平台Flow和系统管理软件Lava在内的七大核心产品线。全面升级使得Skylab在数据生态扩展能力、数据存储格式兼容性和多数据源接入方面均实现了显著提升。
Skylab 5.3版本的升级亮点在于增强了生态系统的兼容性和灵活性。其中,OushuDB实现了对Hudi存储格式的原生支持,并接入了更多类型的数据库作为数据分析和应用的数据源,以满足客户在湖仓一体环境下的多样需求。同时,Magma表的引入,使计算节点能高效缓存数据,显著提高了查询速度。此外,OushuDB客户端Worksheet的性能、功能和用户体验也得到了优化,支持多条SQL查询结果的展示,以及在创建对象时的表空间、表压缩和压缩比选择等功能,进一步提升了客户端的性能和交互性。
数据工厂Wasp在易用性方面也取得了突破,用户只需配置一次任务即可完成库内数十万张表的同步,极大地提升了工作效率。同时,Wasp还新增了Sybase、KingBase等数据源的支持,并加强了CDC功能,有效解决了无主键源表同步时的数据冲突和重复问题。
数据资产管理平台Orbit在此次升级中加入了主数据管理模块,通过集中管理主数据,提高了数据的一致性、准确性和可用性。此外,Orbit在元数据采集、数据资产发布、撤销以及元数据删除等方面也进行了优化,显著提升了处理性能和操作体验。
分析与应用平台Kepler的更新则集中在多数据源接入、血缘详情展示和报表开发的优化上,支持MySQL和OushuDB等多种数据源,并通过新增的单元格批量设置、字段生成表头、表级节点拖入等功能,提升了报表开发的便捷性。此外,新增的水球图、数据文字云等图表类型,丰富了数据可视化的表现形式。
自动化机器学习平台LittleBoy在5.0版本中新增了数据加密和解密算子,增强了平台在不同行业和场景下的生态扩展能力。而系统管理软件Lava的升级则带来了升级框架和OushuDB监控页面的优化,用户可通过此框架一键升级其他平台组件,并获取到集群拓扑结构、执行中的SQL、会话和锁信息等关键信息。
总体而言,偶数Skylab 5.3版本的推出,旨在构建一个集数据存储、计算、分析、应用和AI于一体的实时湖仓数据平台,旨在为用户提供全面的数据管理生态系统,助力智慧营销、智能风控、智慧审计、智慧监管等领域的数据驱动决策。