简介
\(\quad\)由于cnn在捕获全局依赖关系方面效率低，因此该文章提出了基于tansformer的熵模型——Entoformer；并针对图像压缩进行了top-k self-attention和a diamond relative position encoding的优化；同时使用双向上下文模型加快解码。
ENTROFORMER: A TRANSFORMER-BASED ENTROPY MODEL基于transformer的熵模型
发布时间 2023-12-01 12:15:41作者: 浪矢-CL