MoEはハフマン符号だった？生成AI最新論文10本解説【2026/07/25】

今日は、モデルの内部構造を情報理論やスペクトル分解の言葉で読み解く回。混合専門家モデル(MoE)のルーティングをハフマン符号として捉える研究、選好チューニングの更新をスペクトルの頭部・尾部に分解する研究から、分野を越えて壊れない知識編集、モデルマージを生き延びる電子透かし、評価と実運用のずれを監査する手法、材料科学文献を読むエージェントまで、生成AI論文10本をずんだもんと四国めたんが解説します。

▼ 今日のトピック
・混合専門家モデルにおける専門家対応コントラスト復号による幻覚緩和(EAACD)
・MoEのルーティングはハフマン符号なのか——思考連鎖に潜む頻度と多様性の法則
・多いほど良いわけではない——LLMの意見多様性を決める要因
・スキル契約型エージェントによる材料科学文献のエビデンス重視分析(AlphaAgent)
・自然言語は形式言語を完全には代替すべきではない
・モデル自身に語らせる、分野横断に頑健な知識編集手法Moir
・圧縮のボトルネックを破る——低ランク分解と量子化の非直交性(DAM)
・オープンソースLLMの電子透かしをモデルマージに耐えさせる
・ルーティング部分空間——微調整済みモデルの評価と実運用の乖離を監査する
・選好チューニングをスペクトル更新の再編として捉える

▼ 参考論文（arXiv）
https://arxiv.org/abs/2607.20426 — 混合専門家モデルにおける専門家対応コントラスト復号による幻覚緩和
https://arxiv.org/abs/2607.20427 — MoEのルーティングはハフマン符号なのか
https://arxiv.org/abs/2607.20429 — 多いほど良いわけではない：LLMの意見多様性を決める要因
https://arxiv.org/abs/2607.20431 — スキル契約型エージェントによる材料科学文献のエビデンス重視分析
https://arxiv.org/abs/2607.20432 — 自然言語は形式言語を完全には代替すべきではない
https://arxiv.org/abs/2607.20433 — Moir：モデル自身に語らせる分野横断知識編集
https://arxiv.org/abs/2607.20434 — 圧縮のボトルネックを破る：低ランク分解と量子化の非直交性
https://arxiv.org/abs/2607.20435 — オープンソースLLM電子透かしをモデルマージに耐えさせる
https://arxiv.org/abs/2607.20436 — ルーティング部分空間：評価と実運用の乖離を監査する
https://arxiv.org/abs/2607.20438 — 選好チューニングをスペクトル更新の再編として捉える

#MoE #ハフマン符号 #知識編集 #電子透かし #選好チューニング #モデル圧縮 #AIエージェント #arxiv #論文解説 #生成AI #ゆっくり解説 #ずんだもん #四国めたん