たまにFlabe5より賢いかもと思う時がある。
恐ろしいと思ったので、備忘録として残す。
追記(2026/07/26)
Fable5をただ蒸留しただけでは、こうはならないだろ。
アメリカ政府は劣化コピーじゃなく、進化してるからビビってるのか？
仮に蒸留したとしても、それ以外に何か別の処理をしてるのはわかる。
Kimiの論文、アテンション残差（Attention Residuals / AttnRes）
AIの計算効率と推論能力を大幅に向上する理論。
アテンション残差 日本語解説
ちなみに↓Geminiの回答。
正しいのにハルシネーションを出力したと、急に訂正してきたｗｗｗ
謎の忖度が発生してるｗｗｗ
0 件のコメント:
コメントを投稿