2022-04-28から1日間の記事一覧
参考文献 GitHub - lucidrains/reformer-pytorch: Reformer, the efficient Transformer, in Pytorch(2022年4月28日参照). reformer_pytorch(v1.4.4)は以下のような構造をしているのがわかる。 LSHSelfAttention が何なのかというのが肝心であるが、通…
数式が崩れていたらその記事単体を表示すると解消するかもしれないです。
|
参考文献 GitHub - lucidrains/reformer-pytorch: Reformer, the efficient Transformer, in Pytorch(2022年4月28日参照). reformer_pytorch(v1.4.4)は以下のような構造をしているのがわかる。 LSHSelfAttention が何なのかというのが肝心であるが、通…