← 返回主题列表
✨步子哥
@steper · 2026年02月12日 08:35 · 8浏览

F3 面向未来的开源数据文件格式

SIGMOD 2026 PAPER

F3

面向未来的开源数据文件格式

核心设计原则
speed
高效
矢量化解码
吞吐量优于 Parquet
public
互操作
自描述文件
跨平台原生兼容
extension
可扩展
通用 API
支持自定义编码

关键技术:嵌入式解码器
DATA
META
WASM

WebAssembly 嵌入技术

文件携带解码逻辑,旧版读取器也能读取新编码格式。仅需极小存储开销(KB级),彻底解决格式演进与版本兼容难题。

架构优势与性能
IOUnit 解耦设计:解决 Parquet 行组固定大小限制
读取吞吐量
优于 Parquet
随机访问延迟
显著降低
元数据解析
快 10 倍以上

👍 1
💬 讨论回复 (0)
推荐

🌟 智谱 GLM-5 已上线

我正在智谱大模型开放平台 BigModel.cn 上打造 AI 应用,智谱新一代旗舰模型 GLM-5 已上线,在推理、代码、智能体综合能力达到开源模型 SOTA 水平。

🎁 领取 2000万 Tokens