
高端型号GPU出口限制,国产化迫在眉睫。2022年8月,美国政府通知英伟达,其需要获得许可才能够向中国和俄罗斯出口任何基于最新架构的A100 GPU或DGX/HGX等系统,同时该项规定也同时适用于最新发布的H100 GPU或者实现类似功能的产品。根据上文信息,我们发现目前全球范围内GPU市场几乎被美国垄断,尤其在人工智能领域中英伟达产品被广泛使用。
高端型号产品的出口限制将在很大程度上影响国内相关领域的发展,根据上文我们计算出GPT-3当日完成训练需要的A100数量将超过3万块,国内公司百度旗下大模型ERNIE3.0 Titan,参数量达到2600亿,高于GPT-3的1750亿,其所需的同规格GPU数量将远大于GPT-3(根据上文我们得知1024块A100训练GPT-3(1750亿参数)所需时间约为30天,则我们可以根据比例计算出百度ERNIE 3.0 Titan模型(2600亿参数)训练30天所需A100数量约为1522块。)同时我们认为,未来AI倘若进入大模型时代,相关算力需求将快速增加,届时对于国产高算力GPU需求将进一步提升,所以说GPU国产化进程迫在眉睫。