场景描述 本方案适用于自然语言训练场景,使用神龙 GPU云服务器(SCCGN6)+CPFS进行NLP的 训练,采用Bert模型。这里不使用容器,直接 使用裸机进行NLP的Bert训练,使用飞天AI加 速训练工具可以有效提升多机多卡的训练效率。 解决问题 使用神龙GPU云服务器搭建NLP训练环 境 使用SCC的RDMA网络 使用CPFS存储训练数据 使用飞天AI加速训练工具加速训练 产品列表 神龙GPU云服务器(SCCGN6) SCC超级计算集群 CPFS共享存储
创建mpihosts文件[root@scc001~]#cd/mnt/perseus/[root@scc001perseus]#ls Perseus+BERT+README.pdf mpi_host.txt perseus-1.1.0+01246ba-cp36-cp36m-linux_x86_64.whl perseus-bert test_commands test_data[root@scc001perseus]#vimmpi_host.txt scc001 scc002 6.2.部署脚本 步骤1 查看作业脚本。40企业上云实践 基于超级...