Loading...
正在加载...
请稍候

Countering Model Collapse in Iterative Self-Training via Dynamic Center-Edge Sampling

2026-08-06 15:10

🔍 耿同学打假报告

论文信息

  • 标题:Countering Model Collapse in Iterative Self-Training via Dynamic Center-Edge Sampling
  • 作者:Bingze Zhu, Yubo Xie
  • 期刊:Electronics (MDPI)
  • DOI:10.3390/electronics15040869
  • 发表年份:2026
  • 论文来源:Countering Model Collapse in Iterative Self-Training via Dynamic Center-Edge Sampling.pdf

综合评定:🔴 实锤

详细发现

发现 1:数据造假检测(核心数据违背数学常理,高度疑似复制粘贴/造假)

  • 位置:Table 7 (Ablation studies based on OPT-125M)
  • 描述:在消融实验中,完整的 DCES 模型与去除了动态采样模块的变体(DCES w/o Dynamic Sampling)在 PPL 和 Entropy 完全不同的情况下, Expected Calibration Error (ECE) 居然一模一样。
  • 证据
    • 完整 DCES:PPL (Wiki) = 29.7028, Entropy = 2.6860, ECE = 0.0447
    • DCES w/o Dynamic Sampling:PPL (Wiki) = 32.4577, Entropy = 2.7040, ECE = 0.0447
    • 耿同学辣眼:ECE(期望校准误差)是连续变量的统计期望值。两个模型在内部的 Loss、PPL 和 Entropy 均有显著变化的前提下,最终计算出的 ECE 居然精确到了小数点后四位完全一致(0.0447)。这在统计学上概率趋近于零,更是典型的“数据造假/随机数生成器都不如”的复制粘贴痕迹。造假者很可能是直接把完整模型的 ECE 复制粘贴过去,却忘了修改后面的数据。
  • 严重程度:🔴
  • 复核状态:✅ 成立

发现 2:引用与方法学异常(参考文献严重缺失,疑似 AI 幻觉生成)

  • 位置:References (文末参考文献列表)
  • 描述:作为一篇学术论文,其核心支撑的参考文献居然大面积缺失作者和文章标题,甚至直接只剩下一个光秃秃的 arXiv 编号。
  • 证据
    • 参考文献 [2]:直接以 Makes Models Forget. Nature 2024... 开头,完全没有作者信息,且标题残缺(真实论文应为 Shumailov 等人的《The Curse of Recursion...》)。
    • 参考文献 [8]:同样没有作者,直接以 Model Collapse Inevitable?... 开头。
    • 参考文献 [9]:更加离谱,正文、作者、标题全部消失,只剩下:arXiv2022, arXiv:2206.05802. [CrossRef]
    • 耿同学辣眼:连本科生用 Endnote 都不至于生成这种格式。这是 ChatGPT 等 LLM 在生成文本时典型的“API幻觉”特征。这说明作者在用 AI 写完论文后,连最基本的人工校对都没做就敢投递。
  • 严重程度:🔴
  • 复核状态:✅ 成立

发现 3:产出异常检测(疯狂压缩的时间线与不合理的算力声明)

  • 位置:时间线(Received: 20 January 2026 / Accepted: 14 February 2026)& Section 4.1 (Implementation Details)
  • 描述:论文从投稿到接收仅用了 25 天,且包含多达 5 个大语言模型(包含 6.7B 参数的模型)的 10 轮迭代微调。但其声称的算力仅仅是“a single NVIDIA RTX 4090 GPU”和“2×NVIDIA A800 GPUs”。
  • 证据
    • OPT-6.7B 模型在 2 张 A800 上进行 10 轮的迭代自训练,涉及大量的合成数据生成、K-means 聚类(K=8)、编码(使用 all-MiniLM-L6-v2)以及微调。2 张 A800(即便是 80G 显存)也很难支撑 6.7B 模型在短时间内完成如此庞大的闭环 pipeline,且不说这还要与另外四个模型并行实验。
    • 结合 25 天的极速发表周期和前言中大量的 AI 痕迹,这是一篇典型的“灌水型/量产型学术”工业产物。
  • 严重程度:🟠
  • 复核状态:✅ 成立

发现 4:数据造假检测(实验设计存在明显的偷工减料)

  • 位置:Table 5 (Comparison of model performance on OPT-6.7B)
  • 描述:作者在较小的模型(OPT-125M, GPT2, Qwen3)上都对比了 4 种方法,但在花费算力最大的 OPT-6.7B 模型上,却突然只对比了 3 种方法,悄悄去掉了 PPL Filtering 和 SemDeDup。
  • 证据:OPT-6.7B 的表格中缺失了两个 Baseline。作者在正文中试图用“PPL filtering performs poorly”来解释,但这不能成为在大模型上省略对照试验的理由。结合算力不足的嫌疑,极有可能是作者根本没有跑出或无法跑出这两个对照组的数据,直接将其砍掉。
  • 严重程度:🟠
  • 复核状态:✅ 成立

发现 5:图片与定性分析检测(过于刻意的“教科书式”结果)

  • 位置:Table 6 (Qualitative comparison)
  • 描述:展示的 Baseline 模型退化结果极其夸张。
  • 证据:在 Table 6 中,Baseline 模型生成的文本变成了纯粹的数字:“1.1.1.1.1.1.1.1.1.1...”。虽然 Model Collapse 确实会导致多样性下降,但能退化成在指令微调下输出连续 20 个“1.”,显得过于“配合”论文的主旨。这种极端的、带有表演性质的退化样本,很像是为了拼凑结论而刻意挑选甚至人工编辑的。
  • 严重程度:🟡
  • 复核状态:✅ 成立

耿同学辣评

这篇论文简直是 AI 参与学术造假的标准“作案模板”:开头让 AI 写前言,中间用 AI 搭代码跑个简陋的实验,最后连参考文献都能被 AI 吞掉作者只剩个 ID。最搞笑的是,造假连 Excel 都用不明白,Ctrl+C 和 Ctrl+V 的时候把 ECE 的数据忘了改,导致两个截然不同的模型算出了小数点后四位完全一样的校准误差。这是把审稿人当傻子,还是把统计学当玄学?

建议后续行动

  • 联系作者要求提供原始数据(特别是 Table 7 中 ECE 完全一致的底层日志)
  • 在 PubPeer 上提出质疑
  • 向期刊编辑部举报
  • 向作者所在机构(上海海事大学)学术委员会举报

⚠️ 免责声明

本报告由 AI 辅助生成,仅供学术讨论参考。
学术不端的最终认定需要专业机构调查。
我们支持学术诚信,但也尊重每一位研究者的名誉权。
如有异议,请以官方调查结论为准。
本工具不保证检测结果的准确性,误报和漏报均有可能。