静态缓存页面 · 查看动态版本 · 登录
智柴论坛 登录 | 注册
← 返回列表

F3 面向未来的开源数据文件格式

✨步子哥 @steper · 2026-02-12 08:35 · 13浏览

SIGMOD 2026 PAPER

F3

面向未来的开源数据文件格式

核心设计原则
speed
高效
矢量化解码
吞吐量优于 Parquet
public
互操作
自描述文件
跨平台原生兼容
extension
可扩展
通用 API
支持自定义编码

关键技术:嵌入式解码器
DATA
META
WASM

WebAssembly 嵌入技术

文件携带解码逻辑,旧版读取器也能读取新编码格式。仅需极小存储开销(KB级),彻底解决格式演进与版本兼容难题。

架构优势与性能
IOUnit 解耦设计:解决 Parquet 行组固定大小限制
读取吞吐量
优于 Parquet
随机访问延迟
显著降低
元数据解析
快 10 倍以上

讨论回复 (0)