GPTくんやAIイラストがつまらないのは、あいつらはたぶん平均的にベストな値を取りに行ってる
なんらかのあるべき値を中心に高次元で正規分布するような空間に張れるという哲学が基本的にはある
フォロー
画像生成の場合、全ピクセル見たら無理なので適当に畳み込んで領域分割みたいなことをやる。自然言語は割にナイーブに見るアルゴリズムが走ってるはず(素直にやるとl^2で頑張るとloglとかlとかになるはず)
この色んな事情で部分で人間らしさが宿ってて、人間の場合は生成AI的な評価関数はありそうだが、そこから勾配計算して素直に勾配法で解いたりはできない
人間がやると、なにかに注意を向けてそこだけ直し、次に他のなにかに注意を向けてそこだけ直し、というプロセスを全体の辻褄が合うように繰り返していくと思われる
あ、しかもそれを出力空間で処理する
人が作ると色んな事情で平均的にベストな値は取れなくて局所最適解を取りに行くしかない
AIはなんらかの最適解を取れてしまうがそれが面白くない