Transformerの補足説明として,Multi-head self attentionの処理について紹介します.
手話言語処理 の記事一覧
-
-
手話認識入門 補足 - 深掘りTransformer1: Positional encodingの処理について
作成日: 2024年04月05日(金) 00:00
最終更新日: 2024年09月18日(水) 09:47
Transformerの補足説明として,Positional encodingの処理について紹介します.
-
手話認識入門9- Transformerを用いた孤立手話単語認識モデル
作成日: 2024年03月22日(金) 00:00
最終更新日: 2024年09月18日(水) 10:09
Transfomer (Encoderのみ) を用いた孤立手話単語認識モデルを紹介します.
-
手話認識入門8 - シンプルなAttention層の適用
作成日: 2024年03月12日(火) 00:00
最終更新日: 2024年09月18日(水) 09:52
シンプルなAttention層を適用した場合の,モデルの挙動変化を見ていきます.
-
手話認識入門 補足 - 深掘りRNN3: PyTorchのRNNクラスが出力する隠れ状態について
作成日: 2024年03月05日(火) 00:00
最終更新日: 2024年09月18日(水) 09:47
PyTorchのRNNクラスが出力する,隠れ状態について解説します.