重み空間演算によるゼロショット量子化
モデルの重み空間から抽出した「量子化ベクトル」を転送することで、訓練なしで量子化後の精度を大幅に向…
AI&Tech、もう追いかけなくていい。
30秒で読めるニュースダイジェスト
研究
2825件
スペクトルワッサースタインフローとしてのミューオンダイナミクス
深層学習の最適化を安定させる勾配正規化手法「Muon」の理論的基盤が構築されました。
Android Coach：単一状態複数行動でオンラインエージェント学習効率を向上
Androidエージェントのオンライン強化学習において、単一状態から複数行動を学習する新フレームワーク「An…
AIコンポーネントベースシステムの統制された能力進化：ライフサイクル時の互換性チェックとロールバック
AIコンポーネントベースシステムにおいて、新しいAI能力モジュールの安全な導入とロールバックを管理する…
コンテキスト集約型タスクにおけるKVキャッシュオフロードの課題
長文LLMのKVキャッシュオフロードが、情報抽出量の多いタスクで性能劣化することが判明しました。
Lightning OPD：オフラインオンポリシー蒸留による大規模推論モデルの効率的な後学習
大規模言語モデルの効率的な後学習手法「Lightning OPD」が開発されました。
EviDep：分離型エビデンシャル学習による信頼性の高いマルチモーダルうつ病推定
AIが自然な環境下でマルチモーダルデータからうつ病の重症度を推定する新手法が開発されました。
SeaEvo：戦略空間進化によるアルゴリズム発見の進展
LLMを活用したアルゴリズム探索において、戦略空間を明示的に扱う新手法「SeaEvo」が提案されました。
過剰パラメータ化されたネットワークの最適化における対称性の役割
過剰パラメータ化された深層学習ネットワークの最適化メカニズムにおいて、対称性が果たす役割が解明され…
手書きルールなしでSLOGにおける構造的汎化を実現
手書きのルールなしに、ニューラルセルオートマトンが意味解析の構造的汎化を達成しました。
持続的視覚記憶：LVLMにおける深層生成のための知覚維持
大規模視覚言語モデル（LVLM）の「視覚信号希釈」問題を解決する新モジュールが提案されました。
Rhamba：安静時fMRIの自己教師あり学習向け領域認識型ハイブリッドAttention-Mambaフレームワーク
安静時fMRIデータに自己教師あり学習を適用する新しいフレームワーク「Rhamba」が開発されました。