华为正式宣布开源数据虚拟化引擎 openLooKeng

  • 来源:网络
  • 更新日期:2020-07-02

摘要:【环球网科技报道 记者 林迪】7 月 2 日消息,日前,记者从华为官网了解到,华为正式宣布开源数据虚拟化引擎 openLooKeng,其开源社区官网也同步上线。资料显示,2019 年 11 月 19 日

【环球网科技报道 记者 林迪】7 月 2 日消息,日前,记者从华为官网了解到,华为正式宣布开源数据虚拟化引擎 openLooKeng,其开源社区官网也同步上线。

资料显示,2019 年 11 月 19 日,华为宣布开源数据虚拟化引擎 HetuEngine(开源版本的 HetuEngine 叫 openHetu),现在,openHetu 正式更名为 openLooKeng,HetuEngine 更名为 LooKengEngine。

据华为方面介绍,openLooKeng 是一款开源的高性能数据虚拟化引擎,它可以提供统一 SQL 接口,具备跨数据源 / 数据中心分析能力以及面向交互式、批、流等融合查询场景。同时增强了前置调度、跨源索引、动态过滤、跨源协同、水平拓展等能力,致力于为大数据用户提供极简的数据分析体验,让用户像使用 数据库 一样使用 大数据 。

具体来看,为了改善大数据的易用性,华为发起数据虚拟化引擎 openLooKeng 开源项目,旨在解决以下问题:统一 SQL 接口访问多种数据源;免数据搬迁,在数据所在地对数据进行处理,并且支持跨数据中心、跨云处理;面向交互式、批、流等融合查询的场景(第一个版本支持交互式查询场景);此外,该项目还提供了 Coordinator AA 高可靠、可扩展的数据源 connector 框架等能力,让用户及大数据解决方案伙伴更方便的使用 openLooKeng。

据悉,openLooKeng 使用了业界著名的开源 SQL 引擎 Presto 来提供交互式查询分析基础能力,并继续在融合场景查询、跨数据中心 / 云、数据源扩展、性能、可靠性、安全性等方面发展。

至此,通过开源 openEuler ( Linux 发行版 ) 、Mindspore(全场景深度学习框架)、SODA(智能开放的数据自治平台)、Apache CarbonData(大数据)、Apache 微服务项目 ServiceComb、KubeEdge(边缘计算)、Volcano(高性能调度引擎)等,华为在逐步把长期投资和积累的大量基础软件能力贡献到其开源社区中。