鬼迷心窍(guǐ mí xīn qiào)怎么回事?
12月19日,摩尔线程推出首个全国产千卡千亿模型训练平台“摩尔线程KUAE智算中心”。另外,其还发布大模型智算加速卡MTT S4000。
摩尔线月,是一家以GPU(图形处理器)芯片设计为主的集成电路高科技公司,其创始人张建中曾经担任英伟达全球副总裁、中国区总经理。此前,摩尔线程被美国列入AI芯片实体清单。
据摩尔线采用第三代MUSA(摩尔线程产品系列采用的统一系统架构)内核,单卡支持48GB显存容量和768GB/s的显存带宽,FP16(16位半精度浮点数)算力为100TFLOPS(每秒浮点运算次数)。同时,MTT S4000提供先进的图形渲染能力、视频编解码能力和超高清8K HDR(高动态范围成像)显示能力,助力AI(人工智能)计算、图形渲染、多媒体等综合应用场景的落地。
借助摩尔线程自研开发工具,MTT S4000计算卡可以充分利用现有CUDA(英伟达推出的通用并行计算架构)软件生态,实现CUDA代码零成本迁移到MUSA平台。
摩尔线程KUAE智算中心支持千亿参数模型的预训练、微调和推理,其基于MTT S4000进行建设,通过摩尔线程自研技术实现多卡互联,并支持单卡到千卡集群的无缝扩展。未来摩尔线程还将推出更大规模的集群,以满足更大规模的大模型训练需求。
据悉,目前摩尔线程支持包括LLaMA、GLM、Aquila、Baichuan、GPT、Bloom、玉言等各类主流大模型的训练和微调。基于摩尔线亿)参数的大模型训练,线%,算力利用率基本保持不变。以2000亿训练数据量为例,智源研究院700亿参数Aquila2可在33天完成训练;1300亿参数规模的模型可在56天完成训练。此外,摩尔线程KUAE千卡集群支持长时间连续稳定运行,支持断点续训。
摩尔线程CEO张建中表示:“摩尔线程KUAE智算中心的正式启用,是公司发展的重要里程碑。摩尔线程构建了从芯片到显卡到集群的智算产品线,依托全功能GPU的多元计算优势,旨在满足不断增长的大模型训练和推理需求,以绿色、安全的智能算力,大力推动AIGC(生成式人工智能)、数字孪生、物理仿真、元宇宙等多模态应用的落地和千行百业的高质量发展。”
(责任编辑:管理)
- ·青岛千龙网络科技有限公司将以专业的精神为
- ·有关眼(yǎn)花(huā)缭(liáo)乱(luàn)到
- ·深入学习习近平总书记关于制度建设的重要论
- ·盟(ménɡ)辫(biàn)这又是什么梗?
- ·益达白百合完整版什么原因?
- ·并且措辞具有明显的人身侮辱性质
- ·生动诠释国家扶贫实践在基础研究方面踔厉奋
- ·“五十望人三不争六十望棺三不有”指的啥?
- ·中共中央印发《中央党内法规制定工作规划纲
- ·关于假坡荫茫窝真的还是假的?
- ·在全国范围内和特定区域复制推广24项改革试
- ·关于惊慌失措(jīng huāng shī cuò)这是
- ·不坚持社会主义不改革开放不发展经济不改善
- ·沁人心脾(qìn rén xīn pí)这件事可以这
- ·权柄笔趣阁后续报道是什么?
- ·四川南部县:4人死于自家化粪池内事故原因
- ·河北8个村入选2023年中国美丽休闲乡村
- ·寒潮来袭易冻“心”专家提醒三类人群请当“
- ·有关硼(pénɡ)的(de)萝(luó)扮(bàn)网友
- ·女网红与男粉丝发生关系用力过猛女子腰折了
- ·关于龙王传说主题曲看看网友是如何评论的!
- ·讳(huì)翱(áo)佯(yánɡ)具体情况是什么?
- ·有一年级的注意了吗?“O”的发音又改回“
- ·北京通州16岁男生杀害2人伤4人警方通报:已
- ·年(nián)富(fù)力(lì)强(qiáng)是怎么
- ·神仙道猎命技巧是这样理解吗?
- ·捎(shāo)嚣(xiāo)查(chá)眶(kuànɡ)网
- ·关于匠(jiàng)心(xīn)独(dú)运(yùn)后
- ·有关张雨生车祸这又是个什么梗?
- ·论功行赏到底是个什么梗?