gpu服务器参数？gpu参数

如何正确选择GPU服务器

选择GPU服务器时首先要考虑业务需求来选择适合的GPU型号。在HPC高性能计算中还需要根据精度来选择，比如有的高性能计算需要双精度，这时如果使用P40或者P4就不合适，只能使用V100或者P100；同时也会对显存容量有要求，比如石油或石化勘探类的计算应用对显存要求比较高；还有些对总线标准有要求，因此，十次方平台建议您选择GPU型号要先看业务需求。

当GPU型号选定后，再考虑用什么样GPU的服务器。这时我们需要考虑以下几种情况：

第一、在边缘服务器上需要根据量来选择T4或者P4等相应的服务器，同时也要考虑服务器的使用场景，比如火车站卡口、机场卡口或者公安卡口等；在中心端做Inference时可能需要V100的服务器，需要考虑吞吐量以及使用场景、数量等。

第二、需要考虑客户本身使用人群和IT运维能力，对于BAT这类大公司来说，他们自己的运营能力比较强，这时会选择通用的PCI-e服务器；而对于一些IT运维能力不那么强的客户，他们更关注数字以及数据标注等，我们称这类人为数据科学家，选择GPU服务器的标准也会有所不同。

第三、需要考虑配套软件和服务的价值。

第四、要考虑整体GPU集群系统的成熟程度以及工程效率，比如像DGX这种GPU一体化的超级计算机，它有非常成熟的操作系统驱动Docker到其他部分都是固定且优化过的，这时效率就比较高。

8卡gpu服务器功率要求

GPU服务器，就是有专用显卡的服务器，一般多用于超级算力，图形计算，或者说IPFS挖矿等，一般来说，GPU服务器多为4U的服务器。根据GPU的数量不同，该服务器的功率也是不一样的。

一块GPU卡一般耗电350W，一般4U的服务器最大可以支持8块GPU卡，通常业内多称之为8卡GPU服务器，当然也有4卡，6卡的。如果装满8卡GPU，那么其耗电在2800瓦，差不多就是 13A电力。一般常规的机房机柜标准配电是13A起步（也有按10A起步的）

如果是放在13A电力的机柜里，那么一台4U 8卡的GPU服务器就得占用一个机柜，所以这个时候，如果客户机器数量比较多的话，就租用高电机柜比较合算，不然一台占一个机柜，机柜空间就大大的浪费了。

一般来说，不计算用电的情况下，一个4U的机柜的机柜费是根据一个机柜的总成本除8得出来的（因为一个42U的机柜空间上可以放8台4U服务器）。比如说我们国门机房 1个机柜 42U，13A电力一个月是4000元，除8等于500元。也就是说正常在国门机房，如果1个4U的机位，在用电不超过13除以8也就是1.625A的情况下，只需要500元的机位费。当然这个是理论值，一般来说4U的机器，耗电量正常的都要在2.5A左右，如果是GPU专业服务器，常见耗电在5A左右，也有一台耗电量在13，或25或32A等不同档次的。

所以说咱们在托管GPU服务器的时候，一定要确定机器的耗电量是多少，然后再看是整租个普通机柜，还是租用高电机柜放多台GPU服务器。

最新RTX4090深度学习GPU服务器配置大全有吗

产品类型 4U机架式

1 CPU金牌6326 16核心32线程基频2.9GHZ加速频率3.5GHZ TDP: 185W 2

2内存 512G(32GB*32) DDR4 3200MHZ 1

4准系统超微420GP-TNR 4U机架式准系统，带2200W冗余2+2电源;平台最大支持lO个GPU

32个DIMM插槽；母板超级X12DPG-OA6处理器中央处理器双插槽 P+(LGA-4189)第三代英特尔至强可扩展处理器支持CPU TDP 270W核心高达40C/80T；高达 60MB的缓存图形处理器支持的GPUHGX A100 8-GPU 40GB/80GB SXM4多 GPU 1

5 SSD三星PM9A1 1TB M.2接口 NVMe协议四通道 PCIe4.0固态硬盘 1

6 SATA希捷(Seagate)银河系列V6 6TB ST6000NM021A 7200RPM 256MB SATA3企业级硬盘 1

7 GPU卡英伟达RTX 4090公版 4