しゃけのブログ

某大学院で研究している人の備忘録

attention

LambdaNetworks: Modeling Long-Range Interactions Without Attention

【論文解説】LambdaNetworks: Modeling Long-Range Interactions Without Attention from EndoYuuki www.slideshare.net Slideshareに投稿しました.

【論文雑読み】Generative Adversarial Transformers -

Generative Adversarial Transformers arxiv.org GANはCNNで普通は構成されるが,Transformerを用いて構成するGANsformerを提案 Transformerを使うことで,Global Contextを生成タスクに活用できる 疑似画像生成 (image synthesizing)において,SoTA達成.次…