当GPU型号选定后,再考虑用什么样GPU的服务器。这时我们需要考虑以下几种情况:
第一、 在边缘服务器上需要根据量来选择T4或者P4等相应的服务器,同时也要考虑服务器的使用场景,比如火车站卡口、机场卡口或者公安卡口等;在中心端做Inference时可能需要V100的服务器,需要考虑吞吐量以及使用场景、数量等。
第二、 需要考虑客户本身使用人群和IT运维能力,对于BAT这类大公司来说,他们自己的运营能力比较强,这时会选择通用的PCI-e服务器;而对于一些IT运维能力不那么强的客户,他们更关注数字以及数据标注等,我们称这类人为数据科学家,选择GPU服务器的标准也会有所不同。
第三、 需要考虑配套软件和服务的价值。
第四、要考虑整体GPU集群系统的成熟程度以及工程效率,比如像DGX这种GPU一体化的超级计算机,它有非常成熟的操作系统驱动Docker到其他部分都是固定且优化过的,这时效率就比较高。
在选择GPU服务器的时候,首先要考虑业务需求,根据具体需求来选择适合的GPU服务器,还需要考虑客户本身使用人群和IT运维能力,考虑配套软件和服务价值,还要考虑整体GPU集群系统的成熟程度以及工程效率等方面。当然我觉得价格也是要考虑到,性价比高那是最好的了。我朋友公司当时采购的是思腾合力家的服务器,看中的就是品牌和服务,它还是英伟达官方授权的经销商,服务方面3年质保,上门服务,免费方案,销售响应迅速,全年无休、售后服务保障长。对于我朋友来说,还是挺合适的选择。欢迎分享,转载请注明来源:夏雨云
评论列表(0条)