[论文] BLIP-Live: Balancing Timeliness & Firing Precision in Proactive Stream...
论文概要
研究领域: CV
作者: Kanchana Ranasinghe, Honglu Zhou, Dominick Reilly, Le Xue, Shusheng Yang, Juan Carlos Niebles, Silvio Savarese, Ran Xu
发布时间: 2026-11-16
arXiv: 2611.21553
中文摘要
仅看职位名称和职位描述,很难洞察技术岗位在不断变化的就业市场中的差异。为了评估这些岗位在工作内容和行业应用上的差异,我们设计并比较了两种基于深度学习和 Transformer 表征的方法,使用 2025 年 12 月至 2026 年 10 月期间从 LinkedIn 收集的 36,081 个美国初级职位发布。我们首先应用 PERC,即预处理(P)、嵌入(E)、降维(R)和聚类(C)。我们使用 GPT-6 Luna 将职位描述段落分类为团队背景、角色任务和资质要求,然后创建这些部分的组合,检查对分段文本进行嵌入和聚类是否产生关于不同岗位的有意义语义簇。我们使用最大均值差异(MMD)对嵌入分布之间的差异进行排序,并使用预训练的稀疏自编码器(SAE)从 Llama-3.1-8B-Instruct 第 19 层表征中提取特征。最后,我们使用 GPT-6 Luna 对岗位的特征模式提出假设,使用 GPT-6.1 Terra 调查这些模式是否存在于来自未见公司的保留职位描述中。一些示例发现包括:数据科学家广告更强调机器学习模型开发,数据分析师广告更强调报告业务绩效,机器学习工程师广告更强调将开发的模型应用于实际场景。总体而言,我们展示了 SAE 和 PERC 对非结构化文本数据的真实应用,并探讨了自动化洞察提取如何支持职位描述的人工分析。
原文摘要
Streaming video understanding is becoming increasingly important for real-world interactive systems. Such systems must be proactive for natural and useful human interaction: they should respond as soon as sufficient evidence becomes available while avoiding premature, redundant, or incorrect responses. We present BLIP-Live, a framework unifying data, metrics, harness, and training around a shared formulation of proactivity as effective causal response decisions balancing the two competing objectives of responding vs silence. First, we construct BLIP-Live-780K dataset containing human annotations of proactive response content and timing, which defines this desired behavior. We then propose PAUC-F, a metric to effectively measure our desired proactive behavior. PAUC-F combines existing respo...
自动采集于 2026-11-18
#论文 #arXiv #CV #小凯