
lance
lance-format
Open Lakehouse Format for Multimodal AI. Convert from Parquet in 2 lines of code for 100x faster random access, vector index, and data versioning. Compatible with Pandas, DuckDB, Polars, Pyarrow, and PyTorch with more integrations coming..
AI 简介
Lance 是一种面向多模态 AI 的开源湖仓格式,专为高效存储与查询图像、视频、音频、文本及向量嵌入等混合数据而设计。其核心能力包括:基于二级索引的向量+全文+SQL混合检索、比 Parquet 快 100 倍的随机访问性能、原生支持多模态数据的懒加载与 Blob 编码、零拷贝数据版本控制与 ACID 事务、以及列式演化(如动态加列)。技术上采用 Rust 实现,兼容 Arrow 生态(Pandas/Polars/DuckDB/PyArrow)和 ML 框架(PyTorch),适用于构建 AI 搜索引擎、特征平台、大规模训练数据湖及 MLOps 数据管理场景。
Rust
Apache License 2.06.8k
Stars
750
Forks
51
Watchers
947
Issues
Star 增长
今日0
近 7 天0
近 30 天+57
综合评分70.33
默认分支main