計画はどこに？軽量な機械的介入で言語モデルの潜在的計画を特定する
言語モデルが将来のトークンを計画する内部表現をどこで形成し、それが生成を因果的に駆動するかを研究し…
AI&Tech、もう追いかけなくていい。
30秒で読めるニュースダイジェスト
LLM
2989件
大規模言語モデルにおけるツール呼び出しの線形可読性と操作性
LLMが選択するツールがモデル内部で線形に読み取り可能かつ操作可能であることが判明しました。
ペアを超えて：言語モデルは密かに選好グラフを最適化している
言語モデルの調整手法であるDPOを、ペア比較だけでなく、より複雑な選好グラフ構造に対応させるGraphDPOが…
高速バイト潜在トランスフォーマー
バイトレベル言語モデルの生成速度を大幅に向上させる新しいトレーニングと生成技術が開発されました。
CA-SQL: 複雑度認識型推論時間推論によるText-to-SQL
LLMが自然言語からSQLクエリを生成するText-to-SQLタスクにおいて、CA-SQLが困難な問題で高い性能を達成し…
記憶の呪い：LLMエージェントにおける記憶拡張が協力意図を損なう仕組み
LLMエージェントの記憶（コンテキストウィンドウ）を拡張すると、複数エージェント間の協力行動が低下する…
エージェントにおける高品質な長期記憶コンテンツ生成のためのマルチメモリセグメントシステム
エージェントが過去の対話から高品質な長期記憶を生成する新しいシステムが開発されました。
LLMベースエージェントによる医薬品資産デューデリジェンスにおける競合状況マッピング
LLMベースのAIエージェントが、医薬品の競合薬発見と属性抽出で高い精度と速度を達成しました。
「スキップ・イット？」視覚言語モデルにおけるレイヤースキップの理論的条件
視覚言語モデルの推論コスト削減のため、レイヤースキップの理論的条件を提案する研究が発表されました。
InvThink：より安全な言語モデルのための事前検証推論
言語モデルが最終応答を生成する前に、潜在的な失敗を列挙・分析・制約する新しいフレームワーク「InvThin…
環境レベルのクエリによるワールドモデル学習のベンチマーク
AIエージェントのワールドモデル学習を評価する新しいベンチマーク「WorldTest」が提案されました。
問題提起学習：推論駆動型とソルバー適応型データ合成
大規模推論モデルの訓練のため、推論とソルバーの能力に適応するデータ合成手法が開発されました。