openLooKeng高性能数据虚拟化引擎
openLooKeng 是一款高性能数据虚拟化引擎,提供统一 SQL 接口,具备跨数据源/数据中心分析能力以及面向交互式、批、流等融合查询场景。同时增强了前置调度、跨源索引、动态过滤、跨源协同、水平拓展等能力。
随着大数据技术的应用和发展,数据种类越来越多,数据分布越来越广,查询场景也越来越复杂,这使得大数据使用更加困难。为了改善大数据的易用性,数据虚拟化引擎 openLooKeng 开源项目旨在解决上述问题:
- 统一 SQL 接口访问多种数据源
- 免数据搬迁,在数据所在地对数据进行处理,并且支持跨数据中心、跨云处理
- 面向交互式、批、流等融合查询的场景(第一个版本支持交互式查询场景)
此外,该项目还提供了 Coordinator AA 高可靠、可扩展的数据源 connector 框架等能力。
openLooKeng 使用了开源 SQL 引擎 Presto 来提供交互式查询分析基础能力,并继续在融合场景查询、跨数据中心/云、数据源扩展、性能、可靠性、安全性等方面发展,让数据治理、使用更简单。
评论