Doris Flight SQL Apache 支持 协议 数据传输效率实现百倍飞跃 Arrow (Doris翻译)

Doris Flight SQL Apache 支持 协议 数据传输效率实现百倍飞跃 Arrow (Doris翻译)

目前,已有多家社区企业用户验证并使用 Arrow Flight SQL 从 Doris 加载数据到 Python、Spark、Flink,测试结果说明,该方式的读取速度相较于以往有了显著的提升。未来,Apache Doris 计划支持 Arrow Flight SQL 写入,届时由主流编程语言构建的系统均可借助 ADBC 客户端来读写 Doris,实现高速的数据交互;并计划利用 Arrow Flight 的并行化能力实现多 BE 并行读取,还可以借助 Arrow Flight SQL 实现 Doris 和 Doris、 Spark 和 Doris 之间的联邦查询。

声明:本文来自用户分享和网络收集,仅供学习与参考,测试请备份。