レス数が1スレッドの最大レス数(1000件)を超えています。残念ながら投稿することができません。
技術的特異点/シンギュラリティ【総合】避難所17
-
>>162
あと、その汎化は小規模なアルゴリズムにしか現れないらしい。
大規模言語モデルでは見られない。
>研究チームはグロッキングを分析するために小規模なAIモデルを利用していますが、大規模なモデルの場合はこの位相変化を確認することができないそうです。しかし、小規模なAIモデルの場合、この奇妙な変化に気づくことができると説明しました。
生成AIの飛躍的性能アップの秘密「グロッキング」とは？ - GIGAZINE
https://gigazine.net/news/20230531-ai-grokking/
掲示板管理者へ連絡
無料レンタル掲示板
