datafusion

Apache DataFusion 是一个用 Rust 编写的可扩展 SQL 查询引擎。它支持标准的 SQL 语法，并且能够高效处理大规模数据集，具备高性能和低延迟的特点。DataFusion 利用了 Apache Arrow 作为内存中的列式存储格式，以提高数据处理效率。此外，该项目还提供了丰富的 API 和插件机制，便于开发者进行二次开发或集成到现有的大数据处理系统中。适用于需要快速查询分析、OLAP 操作以及构建复杂数据管道的各种场景。