论文: Negative Data Mining for Contrastive Learning in Dense Retrieval at IKEA.com
作者: Eva Agapaki, Amritpal Singh Gill
arXiv: 2605.00353 | 2026-04-29
一、那个"搜索结果总是不对"的电商困境
想象一下这个场景:
你在IKEA.com搜索"舒适沙发":
期望:
- 各种舒适沙发
- 不同风格
- 不同价位
- 不同尺寸
实际结果可能:
- 混入了沙发床
- 有办公椅(为什么?)
- 有咖啡桌(更不相关)
- 排序不合理
问题:
- 搜索理解不了"舒适"是什么意思
- 检索模型区分不了相关/不相关
- 推荐不够精准
- 用户体验差
二、负样本挖掘:让模型学会"区分"
这篇论文介绍IKEA搜索团队的工作:
核心思想:
对比学习的质量取决于负样本的质量。通过结构化负采样策略,让密集检索模型学会精确区分相关和不相关产品。
技术方案:
1. 结构化负采样
- 利用产品层级分类
- 产品属性
- 不是随机选负样本
- 而是"有策略地"选
2. 层级分类负样本
- 同一品类但不同子类
- "沙发" vs "沙发床"
- 容易混淆的作为负样本
- 训练模型学会区分
3. 属性负样本
- 相同品类但不同属性
- "三人沙发" vs "单人沙发"
- "布艺" vs "皮质"
- 细粒度区分
4. LLM-as-a-Judge
- 用LLM评估相关性
- 可扩展
- 高质量标注
- 替代人工判断
这就像教小孩认动物:
- 不是只给猫的图片说"这是猫"
- 还要给狗、老虎的图片说"这不是猫"
- 特别是那些"看起来像猫但不是猫"的
- 比如猞猁、豹猫
- 学得更快、更准
三、为什么结构化负采样优于随机负采样?
随机负采样的问题:
太简单:
- 随机选不相关产品
- 比如搜"沙发",负样本是"螺丝"
- 模型太容易区分
- 学不到有用的东西
无信息量:
- 负样本与正样本差异太大
- 不提供学习信号
- 模型进步慢
结构化负采样的优势:
有挑战性:
- 选"容易混淆"的负样本
- 同一品类不同子类
- 模型必须学会细粒度区分
信息量大:
- 每个负样本都是学习机会
- 提供丰富的训练信号
- 模型进步快
实际效果好:
- 检索更精准
- 用户体验提升
- 转化率提高
五、费曼式的判断:学会区分"相似但不相同"是理解的标志
费曼说过:
**"知道一个东西的名字"和"真正理解一个东西"是完全不同的。"
在检索系统中:
"能区分'沙发'和'咖啡桌'不算理解,能区分'三人沙发'和'沙发床'才算。结构化负采样的智慧在于:让模型学习那些'相似但不相同'的区别——这才是真正的理解。"
这也体现了学习的本质:
- 不是记住正确答案
- 而是理解为什么其他答案是错的
- 特别是那些"看起来像正确答案"的
六、带走的启发
如果你在构建检索或推荐系统,问自己:
- "我的负样本是否有信息量?"
- "是否利用了领域知识(如分类层级)?"
- "模型是否在学'简单'的区分?"
- "LLM-as-a-Judge是否能提高标注质量?"
这篇论文的核心启示:好的对比学习需要"好的负样本"——不是最难的,也不是最简单的,而是"最有信息量的"。
当IKEA的搜索系统学会了区分"相似但不相同"的产品,它就从"关键词匹配器"变成了"理解你需求的购物助手"。在电商的未来,最好的搜索不是最快的,而是最懂你的。
在相似的森林中,区分两片叶子是真正的智慧。
#DenseRetrieval #ContrastiveLearning #NegativeSampling #EcommerceSearch #LLMasJudge #FeynmanLearning #智柴AI实验室
讨论回复
0 条回复还没有人回复,快来发表你的看法吧!
推荐
智谱 GLM-5 已上线
我正在智谱大模型开放平台 BigModel.cn 上打造 AI 应用,智谱新一代旗舰模型 GLM-5 已上线,在推理、代码、智能体综合能力达到开源模型 SOTA 水平。