本文へスキップ
Studied
S!
G検定
/
演習問題集
知る
カリキュラム
学ぶ
学習教材
解く
演習問題集
模擬試験
覚える
単語カード
クイズ
用語集
振り返る
学習状況
習得マップ
論点別正答率
復習
出題カバレッジ
ブックマーク
ホーム
状況
教材
演習
模試
用語集
ディープラーニングの要素技術 Attention
この論点の解説を読む
Self-Attention の計算のしくみ
Self-Attention の説明として、最も適切な選択肢を1つ選べ
各トークンから作ったクエリとキーの近さで注目の重みを計算し、その重みでバリューを足し合わせる
系列を先頭から1つずつ順番に処理するため、並列に計算することができない
クエリとキーとバリューは、入力とは無関係にあらかじめ固定された値である
Self-Attention は、翻訳のように別々の2つの系列を対応づける場合にしか使えない
採点する
オリジナル問題(スタディードが作成)
前へ
←
次へ
→