Simple Science

最先端の科学をわかりやすく解説

機械学習トランスフォーマーを変革する:アテンションヘッドを使ったMLPレイヤーの理解

この作業は、トランスフォーマーにおけるMLPレイヤーとアテンションヘッドの相互交換性を探ってるよ。

― 1 分で読む