产品特性
Aloudata AIR 通过联邦查询、动态集成、自适应加速和数据编排等技术,实现了数据虚拟化,直接基于 SQL 即可对全域数据进行探索、准备并提供数据查询服务,而无需关心数据存放位置、数据任务运维和查询性能问题,使业务人员真正实现全链路自助取数、用数。
具体来说,Aloudata AIR 具备以下关键特性:
高性能联邦查询
基于 Apache Arrow 技术体系,实现了面向列存储的高性能即席计算和零序列化数据传输,结合增强的 Parquet 文件向量化读取及查询下推技术,使得 Aloudata AIR Engine 在联邦查询性能方面相比开源 Presto 性能平均提升 2 倍。
全场景智能加速
基于独创的关系投影加速技术,Aloudata AIR Engine 具备全场景加速能力,无论是多源异构查询、多表关联分析、单表明细查询、多维聚合分析还是指标看板服务,都可获得相比开源方案更好的加速效果。基于分析场景和用户行为的查询自适应加速策略,实现了查询精准提速,性能提升 10 到 100 倍。
全链路数据编排
Aloudata AIR Engine 可基于对全域数据集定义和用户查询行为的解析,构建全局算子图谱,并实现基于代价的投影构建规划,智能识别枢纽节点,构建全局成本最优的关系投影,并自动合并相似关系投影存储、下线低收益预计算任务和存储,获得比传统 ETL 方案至少 30% 的成本节约以及更快的数据时效。
零运维数据更新
Aloudata AIR Engine 可基于上游数据变更和数据集定义变更,自动对关系投影进行更新,而无需用户手动创建和触发 ETL 任务。通过上游数据更新事件触发或对元数据的变更监听,Aloudata AIR Engine 可自动推断增量变更的分区,完成下游数据增量更新,免除业务人员对数据更新的关注。
标准化协议接入
数据虚拟化的最终产出是将准备好的数据发布出去,以供下游消费。Aloudata AIR Engine 为消费应用程序提供了单点接入方式,通过 JDBC 和大规模数据传输友好的 Arrow Flight 等标准协议,用户可以在熟悉的工具中直接通过标准 SQL 方便快捷地查询发布的数据集,而无需改变工作习惯。
精细化安全管控
Aloudata AIR Engine 提供了统一且精细的数据安全管控能力,以保障业务自助用数的安全性,包括基于数据空间的数据可见性控制,基于策略的数据访问权限控制等。