「生成AIは複雑なアルゴリズムを使ってる!」みたいなことを言う奴は大体素人
良う分からんけどインプットに対してそれっぽいアウトプットが得られてるというだけのマジで謎システム
言語モデルって基本的にP(Xn|X1,...,X_{n-1})を計算してるだけだしな。
その計算を効率的にやる方法について複雑な数学理論に基づくアルゴリズムが色々実装されてるけど、まあ分野としてはAIどうこうというより数理最適化に一般化される話か
悪いけど全部transformerに突っ込むだけだよ、何も難しいことはない エアプすんな