polars

Polars 是一个用 Rust 编写的极快速 DataFrame 查询引擎。其核心功能包括懒惰和急切执行模式、流处理能力以支持超出内存大小的数据集、查询优化以及多线程处理，同时利用 SIMD 技术提升性能。此外，Polars 支持多种前端语言如 Python、Rust、NodeJS 和 R，并且采用 Apache Arrow 列式存储格式。该项目非常适合需要高效处理大规模数据集的场景，尤其是在数据分析、机器学习预处理等对性能要求较高的应用中。