如何正确选择GPU服务器？

在选择GPU服务器的时候，首先要考虑业务需求，根据具体需求来选择适合的GPU服务器，还需要考虑客户本身使用人群和IT运维能力，考虑配套软件和服务价值，还要考虑整体GPU集群系统的成熟程度以及工程效率等方面。当然我觉得价格也是要考虑到，性价比高那是最好的了。我朋友公司当时采购的是思腾合力家的服务器，看中的就是品牌和服务，它还是英伟达官方授权的经销商，服务方面3年质保，上门服务，免费方案，销售响应迅速，全年无休、售后服务保障长。对于我朋友来说，还是挺合适的选择。

选择GPU服务器时首先要考虑业务需求来选择适合的GPU型号。在HPC高性能计算中还需要根据精度来选择，比如有的高性能计算需要双精度，这时如果使用P40或者P4就不合适，只能使用V100或者P100；同时也会对显存容量有要求，比如石油或石化勘探类的计算应用对显存要求比较高；还有些对总线标准有要求，因此选择GPU型号要先看业务需求。

GPU服务器人工智能领域的应用也比较多。在教学场景中，对GPU虚拟化的要求比较高。根据课堂人数，一个老师可能需要将GPU服务器虚拟出30甚至60个虚拟GPU，因此批量Training对GPU要求比较高，通常用V100做GPU的训练。模型训练完之后需要进行推理，因此推理一般会使用P4或者T4，少部分情况也会用V100。

---