グロッキング現象のトポロジカルな特徴
ニューラルネットワークの「グロッキング」現象を、トポロジーの観点から分析した研究が発表されました。
AI&Tech、もう追いかけなくていい。
30秒で読めるニュースダイジェスト
LLM
4276件
任意の補助パスを用いたフローマッチング
新しい生成モデルフレームワーク「AuxPath-FM」が発表され、任意の分布から抽出された補助変数を確率パス…
MinMaxリカレントニューラルカスケード
MinMax代数に基づく新しいリカレントニューラルネットワーク（RNC）が提案されました。
非対称オンポリシー蒸留：トークンレベルでの探索と模倣の橋渡し
オンポリシー蒸留（OPD）の課題を克服し、性能を向上させる新しい学習手法「AOPD」が提案されました。
Mixture-of-Expertsモデルのエキスパート生態系を予測する無次元制御パラメータ「E」
Mixture-of-Experts（MoE）モデルのエキスパートが健全に機能するか、機能停止するかを予測する無次元パラ…
制約の劣化：バックエンドコード生成におけるLLMエージェントの脆弱性
LLMエージェントがバックエンドコード生成において、構造的制約が増えると性能が著しく低下する「制約の劣…
消費者向けCPUでのLitespark推論：三値ニューラルネットワーク向けカスタムSIMDカーネル
三値ニューラルネットワークの推論を消費者向けCPUで高速化するLitespark-Inferenceが開発されました。
PACZero: 符号量子化による言語モデルのPACプライベートファインチューニング
言語モデルのファインチューニングにおいて、メンバーシップ推論攻撃に強い新しいプライバシー保護手法「P…
RLVRにおける暗黙的な報酬の過学習と低ランクダイナミクスについて
RLVR（検証可能な報酬による強化学習）が訓練データに暗黙的に過学習する現象が発見されました。
連続潜在拡散言語モデル「Cola DLM」
新しい言語モデル「Cola DLM」が、階層的な潜在拡散アプローチでテキスト生成の効率と品質を向上させまし…
グラフマッチングにおける距離忠実なニューラルネットワークの探求
グラフ構造の類似度を測るグラフ編集距離（GED）を、ニューラルネットワークでより正確に推定する研究が発…
DINORANKCLIP：高次ランキング一貫性による視覚言語事前学習のためのDINOv3蒸留と注入
DINORANKCLIPは、CLIPの弱点を克服し、視覚言語モデルの性能を向上させる新しい事前学習フレームワークで…