摩尔线程国产GPU千卡集群完成30亿参数大模型实训

摩尔线程国产GPU千卡集群完成30亿参数大模型实训本次实训充分验证了夸娥千卡智算集群在大模型训练场景下的可靠性，同时也在行业内率先开启了国产大语言模型与国产GPU千卡智算集群深度合作的新范式。据悉，这次的MT-infini-3B模型训练总共用时13.2天，全程稳定无中断，集群训练稳定性达到100％，千卡训练和单机相比扩展效率超过90％。目前，实训出来的MT-infini-3B性能在同规模模型中跻身前列，相比在国际主流硬件上(尤其是NVIDIA)训练而成的其他模型，在C-Eval、MMLU、CMMLU等3个测试集上均实现性能领先。无问芯穹正在打造“M种模型”和“N种芯片”之间的“MxN”中间层产品，实现多种大模型算法在多元芯片上的高效、统一部署，已与摩尔线程达成深度战略合作。摩尔线程是第一家接入无问芯穹并进行千卡级别大模型训练的国产GPU公司，夸娥千卡集群已与无穹Infini-AI顺利完成系统级融合适配，完成LLama2700亿参数大模型的训练测试。T-infini-3B的训练，则是行业内首次实现基于国产GPU芯片从0到1的端到端大模型实训案例。就在日前，基于摩尔线程的夸娥千卡集群，憨猴集团也成功完成了7B、34B、70B不同参数量级的大模型分布式训练，双方还达成战略合作。经双方共同严苛测试，兼容适配程度高，训练效率达到预期，精度符合要求，整个训练过程持续稳定。...PC版：https://www.cnbeta.com.tw/articles/soft/1432478.htm手机版：https://m.cnbeta.com.tw/view/1432478.htm

摩尔线程千卡GPU集群完成700亿参数大模型训练

摩尔线程千卡GPU集群完成700亿参数大模型训练访问：NordVPN立减75%+外加3个月时长另有NordPass密码管理器这充分验证了夸娥智算集群作为国产全功能GPU千卡千亿大模型预训练平台，在稳定性、高效能、易用性和高算力利用率的先进性。这也是憨猴集团首次使用国产AI算力完成大模型训练测试，后续可为其服务的国有企业与运营商等关键领域，提供更加坚实可靠的国产AI训练平台，以及成本效益更优的国产算力解决方案。同时，摩尔线程与憨猴集团签署了战略合作协议。双方将聚焦AI大模型和算力领域，通过摩尔线程夸娥千卡智算集群与憨猴集团AI智算产品及数字化解决方案的深度融合，共同探索国产AI算力的新应用场景与落地实践，加速数智化产业的全面升级。在此之前，摩尔线程已成为第一家接入无问芯穹，并成功完成千卡级别大模型训练的国产GPU公司，夸娥千卡集群与无穹Infini-AI顺利完成了系统级融合适配，并完成了LLama2700亿参数大模型的训练测试。“夸娥”集群基于双路八卡GPU服务器MCCXD800，每个节点有八块MTTS4000GPU加速卡、两颗Intel第四代至强处理器、16x64GB内存、4x3.84TBNVMeSSD，以及双路400GbIB、四路25Gb以太网网络，一体化交付解决大规模GPU算力的建设和运营管理问题。夸娥氏是我国神话传说中的大力神，出自《愚公移山》：“帝感其诚，命夸娥氏二子负二山，一厝朔东，一厝雍南。自此，冀之南，汉之阴，无陇断焉。”...PC版：https://www.cnbeta.com.tw/articles/soft/1431309.htm手机版：https://m.cnbeta.com.tw/view/1431309.htm

摩尔线程首个全国产千卡千亿模型训练平台——摩尔线程KUAE智算中心正式揭牌，这也是国内首个以全功能GPU为底座的大规模算力集

摩尔线程首个全国产千卡千亿模型训练平台——摩尔线程KUAE智算中心正式揭牌，这也是国内首个以国产全功能GPU为底座的大规模算力集群正式落地。据介绍，此次发布的摩尔线程KUAE千卡模型训练平台，支持千亿参数模型的预训练、微调和推理。以2000亿训练数据量为例，智源研究院700亿参数Aquila2可在33天完成训练；1300亿参数规模的模型可在56天完成训练。（澎湃）

NVIDIA封杀转译兼容CUDA 摩尔线程官方：MUSA、MUSIFY不受影响

NVIDIA封杀转译兼容CUDA摩尔线程官方：MUSA、MUSIFY不受影响3月5日晚间，摩尔线程发表官方声明回应称，旗下的MUSA、MUSIFY技术均未受影响！摩尔线程强调，MUSA、MUSIFY不涉及NVIDIAEULA相关条款，开发者可放心使用。据介绍，MUSA是摩尔线程自主研发、拥有全部知识产权、软硬一体的全功能GPU先进计算统一系统架构，与CUDA无任何依赖关系。MUSIFY是摩尔线程面向MUSA开发者提供的开发工具，方便在MUSA计算平台上进行应用移植与开发。它可以让开发者将自己的C++源代码，转换成MUSAC++源代码，再通过MUSA编译器MCC编译生成基于MUSA指令集的二进制代码，最终运行在摩尔线程的全功能GPU上。摩尔线程还向开发者提供MUSASDK，这是摩尔线程GPU并行计算开发SDK的集合，包含了MUSAToolkits（内置运行时/编译器/GPU加速计算库/迁移/优化工具）及计算库、神经网络加速库、通信库等一系列开发工具，可让开发者快速开发出针对摩尔线程GPU优化的并行计算应用。摩尔线程强调，将充分发挥从芯片到显卡到集群的智算产品优势，继续打磨MUSA，持续为大模型训练与推理提供高性能算力支撑。...PC版：https://www.cnbeta.com.tw/articles/soft/1422488.htm手机版：https://m.cnbeta.com.tw/view/1422488.htm

摩尔线程MTT S70国产游戏显卡售价暴降千元 7nm工艺、7GB显存

摩尔线程MTTS70国产游戏显卡售价暴降千元7nm工艺、7GB显存去年今天，摩尔线程MTTS70正式开启预售，价格是2499元。MTTS70显卡可以看作之前S80显卡的精简版，进一步降低价位，推动国产显卡普及，其基于7nm工艺春晓GPU核心，7GB显存。摩尔这款新显卡还拥有3584个MUSA核心，频率1.6GHz，浮点性能11.2TFLOPS，显存也是GDDR6，但容量减少到了7GB，带宽392GB/s，这个显存配置还是极为少见的。此外，接口也从PCIe5.0变成了更主流的PCIe4.0x16，输出接口支持3个DP1.4a，及1个HDMI2.1，最高支持7680x4320@30Hz4路输出。显卡的尺寸为285x112x49mm，主流机箱都能安装。...PC版：https://www.cnbeta.com.tw/articles/soft/1433149.htm手机版：https://m.cnbeta.com.tw/view/1433149.htm

7nm工艺、7GB显存 摩尔线程MTT S70国产游戏显卡开卖：2499元、现货

7nm工艺、7GB显存摩尔线程MTTS70国产游戏显卡开卖：2499元、现货MTTS70显卡可以看作之前S80显卡的精简版，进一步降低价位，推动国产显卡普及，其基于7nm工艺春晓GPU核心，7GB显存。此外，摩尔这款新显卡还拥有3584个MUSA核心，频率1.6GHz，浮点性能11.2TFLOPS，显存也是GDDR6，但容量减少到了7GB，带宽392GB/s，这个显存配置还是极为少见的。此外，接口也从PCIe5.0变成了更主流的PCIe4.0x16，输出接口支持3个DP1.4a，及1个HDMI2.1，最高支持[email protected]4路输出。显卡的尺寸为285x112x49mm，主流机箱都能安装。...PC版：https://www.cnbeta.com.tw/articles/soft/1362825.htm手机版：https://m.cnbeta.com.tw/view/1362825.htm