Skip to main content

有研究发现华为盘古 Pro MoE 模型疑似抄袭千问 2.5一个名为“Honest AGI Community”的研究团队发表论文,提出通过分析大语言模型注意力参数标准差模式来识别模型"指纹"的新方法

  1. 有研究发现华为盘古 Pro MoE 模型疑似抄袭千问 2.5

    一个名为“Honest AGI Community”的研究团队发表论文,提出通过分析大语言模型注意力参数标准差模式来识别模型"指纹"的新方法。该技术能够检测模型是否通过继续训练从其他模型衍生而来,即使经过大量训练也难以消除这些内在特征。

    研究团队使用此方法发现,华为盘古 Pro MoE 模型与 Qwen-2.5 14B 模型存在 0.927 的极高相关性,表明前者可能通过"升级改造" Qwen 模型获得,而非从零训练。这一发现质疑了华为在技术报告中关于大规模独立训练投入的声明,涉嫌版权侵犯和信息造假。

    GitHub

    此前消息:华为、百度同日开源多款大模型

    📮分享投稿 ☘️频道 🍵茶馆
    原始论文.pdf
    395.4 KB
    🤣 716 😁 29 👍 22 ❤️ 11 💊 10 🫡 5 😇 3 👎 2