加速国产GPU开发!摩尔线程开源高性能计算库MUTLASS
快科技11月12日消息,摩尔线程宣布,正式开源高性能线性代数模板库MUTLASS,以便开发者能够更高效地针对摩尔线程GPU MUSA Core、Tensor Core等单元进行编程,加速基于国产GPU的算子开发以及算法创新。
在此之前,摩尔线程已经相继开源OpenCV-MUSA计算机视觉库、MooER音频理解大模型、vLLM-MUSA大语言模型高速推理框架。
▼ MUTLASS开源地址:
https://github.com/MooreThreads/mutlass
在数值计算和深度学习领域,矩阵乘法(GEMM)及其变种,比如FlashAttention、Convolution,是构建复杂上层应用的基石。
不够,为了追求更高的算子融合效率,或者更创新的算法,开发者们往往需要超越标准化计算接口的限制,如标准BLAS接口以及芯片厂商的计算库接口,以实现高性能的定制化算子。
MUTLASS(MUSA Templates for Linear Algebra Subroutines)正是为满足这一需求而设计。
作为摩尔线程专为自研MUSA架构优化的高性能计算库,MUTLASS是基于开源模板库CUTLASS进行的MUSA适配和定制化开发、优化。
针对矩阵乘法及相关变种,MUTLASS提供了一系列高性能的C++模板组件,并采用了与muDNN库类似的分层分解及数据搬运策略,以确保性能的充分发挥。
在本次开源的版本中,摩尔线程适配了CuTe后端库,为其增加了第三代MUSA架构的MMA计算原语,支持TF32/FP16/BF16/INT8等多种数据精度,并以此为基础,初步实现了矩阵乘法、默认实例库、性能测试器及相关工具包的支持。
借助MUTLASS,开发者们既可以灵活复用不同层级的模板组件,也可以按需修改各种模板组件的实现细节,以较低的开发成本实现定制化的高性能算子,从而在摩尔线程全功能GPU上充分释放性能,并尝试更多的算法创新。
摩尔线程将持续优化MUTLASS的性能,并不断引入新的功能。

免责声明:本文为转载,非本网原创内容,不代表本网观点。其原创性以及文中陈述文字和内容未经本站证实,对本文以及其中全部或者部分内容、文字的真实性、完整性、及时性本站不作任何保证或承诺,请读者仅作参考,并请自行核实相关内容。
-
beholder游戏 beholder攻略》怎么玩,游戏体验与攻略)
今天给各位分享beholder游戏的知识,其中也会对beholder攻略》怎么玩,游戏体验与攻略)进行解释,如果能碰巧解决你现在面临的问题,别忘了关 [详细] -
符文工房4 符文工房4攻略wiki(符文工房4攻略人物喜好)
大家好,感谢邀请,今天来为大家分享一下符文工房4的问题,以及和符文工房4攻略wiki(符文工房4攻略人物喜好)的一些困惑,大家要是还不太明 [详细] -
斗战神什么职业好 《斗战神》什么职业比较好
大家好,今天给各位分享斗战神什么职业好的一些知识,其中也会对《斗战神》什么职业比较好进行解释,文章篇幅可能偏长,如果能碰巧解决你现 [详细] -
御龙在天重剑加点图解 御龙在天重剑怎么加点
大家好,关于御龙在天重剑加点图解很多朋友都还不太明白,今天小编就来为大家分享关于御龙在天重剑怎么加点的知识,希望对各位有所帮助!御 [详细] -
圣光的** 魔兽世界神圣的和堕落的任务圣光的**怎么做
大家好,今天来为大家分享圣光的的一些知识点,和魔兽世界神圣的和堕落的任务圣光的怎么做的问题解析,大家要是都明白,那么可以忽略,如果 [详细] -
80分 体测80分什么概念
其实80分的问题并不复杂,但是又很多的朋友都不太了解体测80分什么概念,因此呢,今天小编就来为大家分享80分的一些知识,希望可以帮助到大 [详细] -
dnf王的遗迹爆什么 dnf王的遗迹要怎么打
大家好,关于dnf王的遗迹爆什么很多朋友都还不太明白,今天小编就来为大家分享关于dnf王的遗迹要怎么打的知识,希望对各位有所帮助!《DNF [详细] -
战灵 战灵天舞是天几
其实战灵的问题并不复杂,但是又很多的朋友都不太了解战灵天舞是天几,因此呢,今天小编就来为大家分享战灵的一些知识,希望可以帮助到大家 [详细] -
三国13 《三国志13》新手速成入门攻略 三国志13怎么玩
今天给各位分享三国13的知识,其中也会对《三国志13》新手速成入门攻略 三国志13怎么玩进行解释,如果能碰巧解决你现在面临的问题,别忘了 [详细] -
qq飞车月光女神 QQ飞车中月光女神如何得到
本篇文章给大家谈谈qq飞车月光女神,以及QQ飞车中月光女神如何得到对应的知识点,文章可能有点长,但是希望大家可以阅读完,增长自己的知识 [详细]