1
図をクリックして、玉を1個落としてみよう
もっと詳しく学ぶなら:Udemy講座へ →
Fig 1
次の言葉の仕分け台
クリック:1語 長押し:連射 ダイヤルをドラッグ:温度
温度 0.8
0%
50%
100%
玉:0〜100% のどこかにでたらめに落ちる(くじ引き)
区画の幅:その言葉が選ばれる確率(全部で100%)
温度ダイヤル:確率の差の大きさを変える設定
区画の幅は、AIが各候補につけた点数(もっともらしさ)を温度で割り、softmax という計算で合計100%に割り振ったもの(温度1なら点数のまま)。点数は学習で決まる(→ STAGE 05「まちがいから学ぶ」)。候補と点数は説明用の例。本物の生成AIでは、候補は言葉より細かい「トークン」で(→ STAGE 02「言葉をこまかく切る」)、その数は数万〜十数万個ほど。同じ仕組みで1つ選ぶことを何度もくり返して文を作る。
1
クリック
2
長押し
3
ダイヤルをドラッグ
部品の名前
玉を落とす台車
区画(仕切り)
札
玉
温度ダイヤル
目盛り
しくみ
×
今日の天気は
このステージで、仕組みをくわしく →