arXiv生成AI・機械学習ニュース（2026年7月31日）

arXiv生成AI・機械学習ニュース（2026年7月31日）

キーワード: 強化学習 / メンタル世界モデル / AI研究エージェント / 会計ベンチマーク / AI文章検出 / 多言語検索

本日は、価値関数の事前学習を疑い直す強化学習から、人の信念まで状態に含める世界モデル、研究自動化の限界、実務会計、AI文章検出、人間チームへの社会的費用まで8本を扱う。性能値だけでなく、比較の単位、閉鎖評価、外的妥当性を分けて読む。

オープニング：2026年7月31日 — arXiv生成AI・機械学習ニュース

論文1: Q関数の事前学習は本当に必要か

出典: Do You Really Need to Pretrain QFunctions for Online RL FineTuning?. [arXiv:2607.27203](https://arxiv.org/abs/2607.27203) (2026).

事前学習済み方策をオンライン強化学習で調整するとき、行動価値関数Qもオフラインデータで事前学習するのが自然に見える。しかし事前学習Qは元の方策を評価しており、オンライン更新後