lance
github.com原文 ↗
Lance 是面向多模态 AI 的 open lakehouse format,README 宣称从 Parquet 两行转换,并提供 100x faster random access、vector index 和 data versioning。它兼容 Pandas、DuckDB、Polars、PyArrow、PyTorch 等生态。对于大规模 embedding、图像和训练样本管理,随机访问和版本化比单纯列式压缩更贴近 AI workload。
–浏览
评论 · Comments