自分の認知と学習を静かに磨くデジタルノート
速く流れていく情報から少し離れ、自分の頭でじっくり考えられる文章だけを集めています。
更新
2026/9/20
Tag
タスク固有プロンプトとグローバルコンテキストを用いたマルチタスクグラフ事前学習 マルチタスクグラフ事前学習における不整合問題 マルチタスクグラフ事前学習フレームワークは、根本的な構造的不整合に直面しています。ランダムに初期化されたプロンプトは、事前学習された知識を下流タスクに効果的に転移させるために必要な帰納的バイアスを欠いています。この不整合は、それぞれが文書化された結果をもたらす3つの異なる失敗モードを通じて現れます。 第一に、弱いタスク関連性*...
SLM条件付き階層的関係ルーティングによるラベル付きプロパティグラフ学習 プロパティグラフ学習における意味的ボトルネック 論題： グラフメッセージパッシングに統合された小規模言語モデル（SLM）は、関係の意味論に基づいて情報を動的にルーティングすることで、従来のグラフニューラルネットワークが異種エッジプロパティを静的特徴ではなくタスク依存的な意味信号として扱わないという根本的な制限に対処します。 ラベル付きプロパティグラフは、ノードとエッジの両方に...
Equivariant Message-Passing Networks vs. Sheaf-Theoretic Foundations 主張: Equivariant message-passing networks は分子特性予測において経験的な成功を収めていますが、明示的なトポロジー的基礎を欠いています。Sheaf 理論は、微分幾何学およびコホモロジー原理を通じて分子構造をエンコードする、数学的に厳密な代替案を提供します。 前提条件と仮定:...
物理場シミュレーションにおけるトポロジー・ジオメトリ二重性問題 離散メッシュ上の物理シミュレーションは根本的な建築学的緊張に直面しています。保存則はジオメトリック変形に関わらず厳密に保たれなければならない一方で、材料特性と異方性応答はローカルメッシュ構造に応じて変動します。従来の数値手法はこの分離を慎重な離散化スキームを通じて維持しています。これに対してニューラルサロゲートは両者の関心事を区別されない伝播アーキテクチャに統合し、保存則を違反するか、またはジオメトリ...
ナレッジグラフとグラフニューラルネットワークの融合：包括的サーベイ グラフニューラルネットワークがナレッジグラフシステムを再構築する理由 グラフニューラルネットワークがナレッジグラフ処理の支配的な計算パラダイムとして台頭した理由は、関係構造を二次的な特徴に還元するのではなく、計算の主要な基盤として保持するからです。この区別は根本的です。従来の埋め込みベースのアプローチ（TransE、DistMult、ComplExなど）は、エンティティと関係を固定ベクトル...
テンポラルグラフネットワークのメモリバックトラッキングとトポロジカルアトリビューションを通じた説明可能性へ向けて テンポラルグラフネットワークにおける不透明性の問題 テンポラルグラフネットワーク（TGN）は、不正検知、推薦システム、ソーシャルネットワーク分析といったアプリケーションで、動的な関係データをモデル化するために広く導入されています。固定されたトポロジーで動作する静的グラフニューラルネットワークとは異なり、TGNは新しいイベントが発生するたびにノー...
前置き 事前学習の成果と運用現場のギャップ トランスフォーマーベースのモデルは、大規模な自己教師あり事前学習を通じて、縦断的な電子健康記録（EHR）の予測精度において改善を示しています。GT-BEHRTおよび関連アーキテクチャは、患者軌跡から大規模に分散表現を学習することで、再入院、死亡率、有害事象を含む臨床転帰の予測において測定可能な成果を達成しています。しかし、この実験室環境での性能は、根本的なメカニズムを隠蔽しています。すなわち、研究環境での性能と運用...
未来の相関を解く：時空間予測のための結合周波数領域学習 ポイント単位の損失関数が時空間構造を見落とす理由 標準的な予測モデルは平均二乗誤差（MSE）または平均絶対誤差（MAE）を最適化します。これらの目的関数は、各空間位置と時間ステップで予測誤差を独立に罰します。このアプローチは暗黙の仮定に基づいています。すなわち、ポイント単位の誤差を最小化することが、交通ネットワーク、気象グリッド、センサアレイといったグラフ構造データに内在する依存関係を自動的に捉えると...