浪潮AI服务器性能优秀吗?

浪潮AI服务器性能优秀吗?,第1张

必须优秀!浪潮AI服务器结合GPU硬件拓扑对多GPU的轮询调 度优化使单卡至多卡性 能达到了近似线性扩展,同时在深度学习算法层面,结合GPU Tensor Core 单元的计算特 征。
通过自研通道压缩算 法成功实现了模型的极致性 能优 化,为服务器性能的升 级提供可能。

从服务器的硬件架构来看,AI服务器是采用异构形式的服务器,在异构方式上可以根据应用的范围采用不同的组合方式,如CPU+GPU、CPU+TPU、CPU+其他的加速卡等。与普通的服务器相比较,在内存、存储、网络方面没有什么差别,主要在是大数据及云计算、人工智能等方面需要更大的内外存,满足各种数据的收集与整理。
我们都知道普通的服务器是以CPU为算力的提供者,采用的是串行架构,在逻辑计算、浮点型计算等方面很擅长。因为在进行逻辑判断时需要大量的分支跳转处理,使得CPU的结构复杂,而算力的提升主要依靠堆砌更多的核心数来实现。
但是在大数据、云计算、人工智能及物联网等网络技术的应用,充斥在互联网中的数据呈现几何倍数的增长,这对以CPU为主要算力来源的传统服务提出了严重的考验,并且在目前CPU的制程工艺、单个CPU的核心数已经接近极限,但数据的增加却还在持续,因此必须提升服务器的数据处理能力。因此在这种大环境下,AI服务器应运而生。
现在市面上的AI服务器普遍采用CPU+GPU的形式,因为GPU与CPU不同,采用的是并行计算的模式,擅长梳理密集型的数据运算,如图形渲染、机器学习等。在GPU上,NVIDIA具有明显优势,GPU的单卡核心数能达到近千个,如配置16颗NVIDIA Tesla V100 Tensor Core 32GB GPUs的核心数可过10240个,计算性能高达每秒2千万亿次。且经过市场这些年的发展,也都已经证实CPU+GPU的异构服务器在当前环境下确实能有很大的发展空间。
但是不可否认每一个产业从起步到成熟都需要经历很多的风雨,并且在这发展过程中,竞争是一直存在的,并且能推动产业的持续发展。AI服务器可以说是趋势,也可以说是异军崛起,但是AI服务器也还有一条较长的路要走,以上就是浪潮服务器分销平台十次方的解答。

浪潮AI服务器AGX-2是目前单位空间内计算密度最高的服务器,在2U空间内支持8颗NVIDIA Tesla® V100 Tensor Core 32GB GPUs,在AI训练上实现了计算性能的进一步提升,在模型训练的Batch_Size(批尺寸)设置拥有更大的d性空间,有效解决深度学习线下训练中存在的内存限制问题,更好应对大数据集或高清图像文件的处理瓶颈,帮助计算性能提升可高达40%以上。同时,AGX-2具备拓扑的灵活性可支持NVIDIA NVLink和PCIe两种GPU互联方案,采用NVIDIA NVLink时可提供GPU间高带宽低延迟互联,以及高达300GB/s的吞吐量。

随着人工智能的快速发展,产业化的AI趋势也越发明显。浪潮作为全球领先的AI计算领导厂商,一直在致力于AI服务器的产品打造,现在已经在图像视频、语音识别、金融分析、智能客服等多个AI场景里展开了服务,从而帮助更多的客户实现了AI场景的构建和应用。前不久的生态科技大会上,浪潮科技也公布了最新的NF5488A5服务器数据,相对于之前几款来说,这一产品大幅提升了智能语音、图像识别等AI模型的训练和推理性能,促进了产业AI解决方案的开发与应用。

主要是因为浪潮信息提供的卓越的AI系统设计能力和全栈优化能力,以浪潮AI服务器NF5468M6J为例,该款服务器百年拥有出色的系统设计,以分层可扩展计算架构在业界率先实现对12颗NVIDIA A100 Tensor Core GPU的支持,是浪潮AI服务器的卓越代表。

浪潮AI服务器NF5468M5 是浪潮自主研发的高性能计算、高密度推理服务器,共具有三大功能。一AI模型训练 高性能:支持 8片NVIDIA V100 32G GPU,通过NVLink 20、RDMA、GPUDricet、32G HBM2等四大领先技术,提供强劲计算能力和极致通信延迟,GPU拓扑;二AI推理计算 高效能:可同时支持20片高效能比的Tesla T4 GPU和24个35英寸硬盘,单机可处理600路1080P视频流的结构化应用,将数据保存有效期延长至业界平均水平的9倍;三、AI多场景适配 高可靠:支持10种以上GPU拓扑,且不开机箱即可灵活切换;CPU间通过3条UPI互联,提供业界最高通信带宽;支持4个2200W 80PLUS铂金电源模块及2+2冗余策略;适配各类AI应用场景。

浪潮AI服务器NF5488A5是业界著名的“王牌服务器”,曾屡次打破全球权威AI测试榜单MLPerf的记录,基于ImageNet的ResNet50基准测试显示,NF5488A5完成训练仅需3337分钟,单机性能高居第一;推理性能达到每秒549万张,3倍于去年推理榜单的服务器最好性能。不久前,中科极限元、趋动科技、睿沿科技等元脑生态伙伴分享了多个场景下浪潮AI服务器NF5488A5的实测数据,结果表明浪潮AI服务器NF5488A5可广泛应用于图像视频、语音识别、金融分析、智能客服等典型AI应用场景,帮助AI用户高效完成AI基础设施和开发环境的构建,缩短开发周期,显著提升AI开发和应用效率。


欢迎分享,转载请注明来源:内存溢出

原文地址:https://54852.com/zz/10482188.html

(0)
打赏 微信扫一扫微信扫一扫 支付宝扫一扫支付宝扫一扫
上一篇 2023-05-09
下一篇2023-05-09

发表评论

登录后才能评论

评论列表(0条)

    保存