开发者社区 问答 正文

ARTIST模型如何通过GPT生成图像序列?

ARTIST模型如何通过GPT生成图像序列?

展开
收起
夹心789 2024-06-21 23:30:19 82 分享 版权
1 条回答
写回答
取消 提交回答
  • 在ARTIST模型中,GPT模型以文本序列和通过VQGAN编码后的图像序列作为输入,学习以文本序列为条件的图像序列生成。为了增强生成效果,模型还通过设计的Word Lattice Fusion Layer引入知识图谱中的实体知识,辅助图像中对应实体的生成,最后通过最大化图像部分的负对数似然来训练模型,从而得到与文本相符的图像序列。

    2024-06-21 23:51:22
    赞同 3 展开评论
问答地址: