斯坦福团队被曝抄袭清华系大模型，已删库跑路

斯坦福团队被曝抄袭清华系大模型，已删库跑路 斯坦福的这项研究叫做 Llama3-V，是于5月29日发布的，宣称只需要500美元就能训出一个SOTA多模态大模型，比GPT-4V、Gemini Ultra、Claude Opus都强。 但是没发布两天，Llama3-V 就遭遇了重重质疑。有人指出，Llama3-V 项目中有一大部分似乎窃取了清华大学自然语言处理实验室与面壁智能合作开发的多模态模型 MiniCPM-Llama3-V 2.5。 凤凰网、量子位 美女去衣换脸全站导航

斯坦福团队抄袭清华大模型，事发后紧急删库跑路

斯坦福团队抄袭清华大模型，事发后紧急删库跑路 斯坦福的这项研究叫做 Llama3-V，是于5月29日新鲜发布，宣称只需要500美元就能训出一个SOTA多模态大模型，比GPT-4V、Gemini Ultra、Claude Opus都强。 然而有位细心的网友发现，咦？这“配方”怎么如此的熟悉？这不就是 MiniCPM-Llama3-V 2.5（出自清华系明星创业公司面壁智能）嘛。

斯坦福团队抄袭清华大模型，事发后紧急删库跑路

斯坦福团队抄袭清华大模型，事发后紧急删库跑路 斯坦福研究团队开发的新型多模态模型Llama3-V因声称性能可与GPT-4V、Gemini Ultra和Claude Opus相媲美，但模型尺寸仅为其一小部分而在网上迅速赢得了知名度。 然而，Llama3-V项目很快卷入争议，指控其剽窃了清华大学和Mianbi Intelligence开发的MiniCPM-Llama3-V 2.5模型的重要部分。 比较显示，Llama3-V的代码和架构几乎与MiniCPM-Llama3-V 2.5相同，包括使用相同的分词器和特殊符号，尽管声称参考了不同的模型。 Llama3-V的作者难以提供相似之处的合理解释，显示出对自己代码库的理解不足。 测试显示，Llama3-V和MiniCPM-Llama3-V 2.5在1000块古代中国竹简数据集上的错误重叠率达87%，进一步暗示了剽窃行为。 面对指控，Llama3-V的作者删除了他们在GitHub和Hugging Face上的项目存储库，但这并未解决争议。 人们发现，通过简单地更改变量名称，Llama3-V的检查点可以与MiniCPM-Llama3-V 2.5的代码库兼容。 剽窃指控引发了对斯坦福研究团队在Llama3-V项目中的道德、诚信和声誉的担忧。 在公众的强烈反对之后，Llama3-V的一位作者道歉，将剽窃归因于对队友穆斯塔法的盲目信任。 一名网友在GitHub上揭发此事后，斯坦福团队迅速删除了相关项目页面，试图掩盖事实。面壁智能团队随后展开调查，发现Llama3-V在多个未公开的特征上与MiniCPM-Llama3-V 2.5表现出高度相似，证实了抄袭行为。 来源：https://tech.ifeng.com/c/8a72Qha8VkJ

斯坦福AI团队回应抄袭面壁智能：Llama3-V模型将悉数撤下

斯坦福AI团队回应抄袭面壁智能：Llama3-V模型将悉数撤下 随后，被网友发现，该项目使用的模型结构和代码与面壁智能不久前发布的 MiniCPM-Llama3-V2.5 惊人相似，仅修改了部分变量名。6月2日深夜，面壁智能团队证实，该斯坦福大模型项目与MiniCPM一样，可以识别出“清华简”战国古文字，“不仅对得一模一样、连错得都一模一样”。且这一古文字数据为研究团队花费数月从清华简上逐字扫描并人工标注得来，并未对外公开，证实抄袭事实。今早北京时间凌晨1点27分，此事件迎来终局：斯坦福 Llama3-V 团队的两位作者 Siddharth Sharma 和 Aksh Garg在 X 上就这一学术不端行为对面壁 MiniCPM 团队正式道歉， 表示会将 Llama3-V 模型悉数撤下。相似内容的道歉信，已于几小时前被作者发出一次，但被迅速删除。 ... PC版： 手机版：

斯坦福AI团队抄袭国产大模型？清华系团队发文回应

斯坦福AI团队抄袭国产大模型？清华系团队发文回应 一开始团队面对抄袭质疑还嘴硬否认，只承认使用了MiniCPM-Llama3-V的分词器，后来证据越来越多不仅架构和代码高度相似，而且被发现作者曾在Hugging Face导入MiniCPM-V的代码，然后改名成Llama3-V。最绝的是Llama3-V连国产AI模型的“胎记”都抄走了，跟MiniCPM-V一样能识别清华战国竹简“清华简”，而且连出错的样例、在高斯扰动验证后的正确和错误表现方面都高度相似。而基于非公开训练数据的清华简识别能力，是面壁MiniCPM团队耗时数月、从卷帙浩繁的清华简中逐字扫描并逐一数据标注，融入模型中的。面对铁一般的证据，Llama3-V团队终于立正挨打，一套道歉流程行云流水，火速删库、发文致歉外加撇清关系。其中来自斯坦福计算机科学专业的两位作者澄清说他们并未参与代码工作，所有代码都是毕业于南加州大学的Mustafa Aljadery负责的，他一直没交出训练代码。▲Llama3-V作者：Siddharth Sharma（左）、Aksh Garg（中）、Mustafa Aljadery（右）这样看来，Llama3-V团队并不能算严格意义上的斯坦福团队，不过因为此事声誉受损的斯坦福大学至今没有采取任何公开措施。面壁智能团队的回应很有涵养。今日，面壁智能联合创始人兼CEO李大海在朋友圈回应说“深表遗憾”，这也是一种“受到国际团队认可的方式”，并呼吁大家共建开放、合作、有信任的社区环境。一、网友细数五大证据，作者删库跑路、不打自招Llama3-V的模型代码与MiniCPM-Llama3-V 2.5高度相似，同时其项目页面没有出现任何与MiniCPM-Llama3-V 2.5相关的声明。公开的基准测试结果显示，Llama3-V在所有基准测试中优于GPT-3.5，在多个基准测试中优于GPT-4，且模型尺寸是GPT-4V的1/100，预训练成本为500美元。这也使得该模型一经就冲上Hugging Face首页。但当细心网友发现Llama3-V疑似“套壳”面壁智能此前发布的开源多模态模型MiniCPM-Llama3-V 2.5，在评论区发表评论后，Llama3-V项目作者最初否认抄袭，并称他们的项目开始时间先于MiniCPM-Llama3-V 2.5发布，只是使用了MiniCPM-Llama3-V 2.5的分词器。当网友抛出三大事实质疑后，Llama3-V的做法是不回应直接删除网友评论。昨日下午，网友在MiniCPM-V页面下将事情经过全部公开，并公开@面壁智能让其项目团队投诉。当日晚间，面壁智能研发人员发布推文，其验证结果也印证了网友的说法，Llama3-V与MiniCPM-Llama3-V 2.5高度相似。同时公开喊话Llama3-V研发团队：“鉴于这些结果，我们担心很难用巧合来解释这种不寻常的相似性。我们希望作者能够对这个问题给出官方解释，相信这对开源社区的共同利益很重要。”以下就是Llama3-V被质疑抄袭MiniCPM-Llama3-V 2.5的五大证据：1、Llama3-V的代码是对MiniCPM-Llama3-V 2.5的重新格式化，其模型行为检查点的噪声版本高度相似。其中，Llama3-V只是对代码进行了重新格式化和变量重命名，包括但不限于图像切片、标记器、重采样器和数据加载。面壁智能研发人员也证实，Llama3-V有点类似于MiniCPM-Llama3-V 2.5的噪声版本。2、起初网友在Llama3-V的Hugging Face页面质疑抄袭时，其作者回应称只是使用了其分词器，并且项目开始时间比MiniCPM-Llama3-V 2.5更早。当网友进一步询问如何在MiniCPM-Llama3-V 2.5发布前使用其分词器，作者给出的答案是使用了MiniCPM-V-2的分词器，但很明显，两个版本的分词器完全不同。3、Llama3-V提供的代码无法与Hugging Face的检查点兼容。但网友将Llama3-V模型权重中的变量名称更改为MiniCPM-Llama3-V 2.5的名称后，该模型可以与MiniCPM-V代码一起运行。面壁智能的研发人员的调查结果也显示：更改参数名称后，可以使用MiniCPM-Llama3-V 2.5的代码和config.json运行Llama3-V。4、Llama3-V项目的作者害怕面对质疑，删除了质疑者在Llama3-V上提交的质疑他们偷窃的问题。并且目前Llama3-V项目已经从开源网站中下架删除。5、在一些未公开的实验性特征上，比如在内部私有数据上训练的古汉字清华竹简，Llama3-V表现出与MiniCPM-Llama3-V 2.5高度相似的推理结果。这些训练图像是最近从出土文物中扫描并由面壁智能的团队注释的，尚未公开发布。例如下图中的几个古汉字识别：MiniCPM-Llama3-V 2.5中未公开的WebAgent功能上，在框选内容大小时，Llama3-V与之犯了相同的错误：二、仨作者内讧，Aljadery全权负责写代码，但拿不出训练代码昨天，Aksh Garg、Siddharth Sharma在外媒Medium上公开回应：“非常感谢在评论中指出（Llama3-V）与之前研究相似之处的人。我们意识到我们的架构与OpenBMB的‘MiniCPM-Llama3-V2.5：手机上的GPT-4V级多模态大模型’非常相似，他们在实现方面领先于我们。为了尊重作者，我们删除了原始模型。”Aljadery没有出现在声明中。▲Aksh Garg、Siddharth Sharma的回应声明Mustafa曾在南加州大学从事深度学习研究，并在麻省理工学院从事并行计算研究，拥有南加州大学计算机科学学士学位和计算神经科学理学士学位，目前其没有在公司任职。Garg在社交平台X中发布的致歉声明中提到，Mustafa全权负责编写Llama3-V的代码，他与Sharma因忙于全职工作并未参与代码编写。在听取了Mustafa描述的Idefics、SigLip等架构扩展创新、查看了最新论文后，他们二人就在未被告知该项目与开源代码关系的情况下，帮助Mustafa在外媒Medium和社交平台X对Llama3-V进行了宣传推广。在昨天看到关于Llama3-V的抄袭指控后，Garg和Sharma就与Mustafa进行了原创性讨论，并要求他提供训练代码，但目前未收到任何相关证据。目前，Aljadery的Twitter账号显示“只有获得批准的关注者才能看到”。三、首个基于Llama-3构建的多模态大模型此前，Garg在介绍Llama3-V的文章中提到，Llama3-V是首个基于Llama-3构建的多模态大模型，训练费用不到500美元。并且与多模态大模型Llava相比，Llama3-V性能提升了10-20%。除了MMMU之外，Llama3-V在所有指标上的表现都与大小为其100倍的闭源模型非常相近。他们所做的就是让Llama 3能理解视觉信息。Llama3-V采用SigLIP模型获取输入图像并将其嵌入到一系列块嵌入中。然后，这些嵌入通过投影块与文本标记对齐，投影块应用两个自注意力块将文本和视觉嵌入放在同一平面上。最后，投影块中的视觉标记就被添加到文本标记前面，并将联合表示传递给Llama 3。结语：Llama3-V套壳实锤，或损害开源社区健康发展不论从网友的质疑还是Llama3-V作者的回应来看，该模型套壳MiniCPM-Llama3-V2.5已经基本实锤，高度相似的代码以及部分基于面壁智能内部未公开训练数据训练的功能，都证明这两大模型的相似性。目前来看，对于大模型“套壳”没有明确的界定，但开源大模型以及开源社区的构建本意是促进技术的共享和交流，加速AI的发展，但如果以这种直接“套壳”、更改变量的形式使用，或许会与这一发展愿景背道而驰，损害开源社区的健康发展。 ... PC版： 手机版：

斯坦福人工智能项目作者对抄袭中国大模型致歉，承诺撤下相关模型

斯坦福人工智能项目作者对抄袭中国大模型致歉，承诺撤下相关模型 斯坦福大学人工智能团队主导的Llama3-V开源模型被证实套壳抄袭国内清华与面壁智能的开源模型MiniCPM-Llama3-V 2.5一事，在网络上引发热议。在最新进展中，斯坦福Llama3-V团队的两位作者Siddharth Sharma和Aksh Garg在社交平台上就这一学术不端行为向面壁MiniCPM团队正式道歉。 Aksh Garg表示：“首先，我们要向MiniCPM原作者道歉。我、Siddharth Sharma，以及Mustafa一起发布了Llama3-V，Mustafa为这个项目编写了代码，但从昨天起就无法联系他。我与Siddharth Sharma主要负责帮助Mustafa进行模型推广。我们俩查看了最新的论文，以验证这项工作的新颖性，但并未被告知或意识到OpenBMB之前的任何工作。我们向作者道歉，并对自己没有努力验证这项工作的原创性感到失望。我们对所发生的事情承担全部责任，并已撤下Llama3-V，再次致歉。”