说明:Mesh-Tensorflow [WIP]中的DALL-E
Mesh-Tensorflow中的Open-AI 。
如果这与具有类似的效率,则此回购库应该能够训练模型,并使模型达到Open-AI的DALL-E(12B参数)的大小,并大于Open-AI的DALL-E(12B参数)的大小。
没有预训练的模型...但是。
感谢的tf vae实施以及mtf版本的工作,以及的帮助来构建mtf VAE和输入管道。
设置
git clone https://github.com/EleutherAI/
<weixin_42144604> 上传 | 大小:38kb