深度学习混合精度训练是在cuDNN这一层支持吗,以前TensorRT层Plugin的精度基本是float32,将来Plugin是否也能支持混合精度?

在某些特殊的情况下,是可以达到工业界应用水准的,这些特殊的情况下包括两个domain相对容易转换,data的取得也多;蓝海大脑深度学习高性能计算液冷服务器研究部门人员表示转换可以容许瑕疵,就是转换可能不是最终的结果,后面可能有人为在做修改,你转换只是产生training data再转换到下一个网路里面去。这些什么方法其实都大同小异,基本上是basic again,有时候会加入一些图学的东西。

蓝海大脑 京ICP备18017748号-1