画错专题

LayerNorm的图是不是画错了

这是网上一张很流行的说明几个 Normalization 区别的图 这图出自Kaiming的文章 Group Norm 但是他这个 Layer Norm 的图是不是画错了? 我大四写毕设的时候就想问🤣🤣🤣 这都几年过去了 我觉得图应该是这样画的,相同颜色的区域做标准化 仨方块代表Batch_size = 3 每个方块内,前后向代表channel维度,左右代表宽,上下代表高 也就是