训练阶段的提升更为关键。
时间:2022-03-03 16:12:01 | 来源:行业动态
时间:2022-03-03 16:12:01 来源:行业动态
强如业界经典的深度学习模型 BERT ,数以十亿级参数的复杂神经网络,需要用 GPU 训练数千小时,即使调参优化,也仍然需要几天的时间训练。
但现在,亚马逊云科技提供的机器学习模型优化编译器 Amazon SageMaker Training Compiler,实现无需增加太多代码,即可提升 GPU 实例训练速度。
借助该编译器,包括 BERT-base-cased、BERT-base-uncased、distilBERT-base-uncased 在内的诸多经典深度学习模型,训练速度都能直接提升