阅读背景:

tensorflow 在加载大型的embedding模型参数时,会遇到cannot be larger than 2GB

来源:互联网 

      这种问题是,对于每一个变量 variable 由于是基于protobuf存在这大小限制(2G),这个时候,我们需要将embedding拆开,拆分成N等分,来使得每一个      这种问题是,对于每一个变量 variable 由于是基于protobuf存在这大小




你的当前访问异常,请进行认证后继续阅读剩余内容。

分享到: