Multi-Objective RL for Generating Covalent Inhibitor Candidates
Gil, arXiv:2604.20019 [cs.LG] 2026 — EGFR(Cys797)・ACHE(Ser200)対象・訓練分布外ウォーヘッドの自発的生成
🎯 Pareto Crowding Distance付きRL + GAT残基選択性 + GNN-docking近似で共有結合阻害薬候補を自動設計
① 背景と課題

共有結合阻害薬はibrutinib・osimertinibの臨床成功で再注目されたが、設計には「ウォーヘッドが標的残基（Cys/Ser等）の近傍に位置する幾何学的制約」という非共有結合阻害薬にはない追加要件がある。従来のバーチャルスクリーニングは既存化合物ライブラリに限定され、化学空間探索能が低い。

既存RL生成はほぼ非共有結合阻害薬向けで、共有結合特化（残基選択性・ウォーヘッド幾何学）のスコアリングが未整備
フルドッキングはRLスケール（1反復あたり数万分子）で非現実的 → サロゲートモデルが必要
② パイプライン構成
📝 Pretrained SMILES-LSTM（Papyrus 127万構造）
↓ PolicyGradient RL
📊 スコアリング（8種同時評価）:
SA / 共有結合活性(GCNII) / 残基親和性(GAT) /
ドッキング近似(GNN) / Overlap / Tanimoto / QED
↓ 🏆 Pareto Crowding Distance で多様性保持
↓ 💊 上位250構造をDOCKSTRINGで精密評価 + GradCAM距離測定
③ 主要コンポーネントの精度
80 0 100% 98.7 82.7 87.6 79.1 Cys Ser/Thr Val Test GAT残基選択性 精度 (%)
GNNドッキング近似性能指標
EGFRR²=0.86, MSE=0.52
ACHER²=0.75, MSE=0.88
④ 主要結果 (a) 最良モデルの再発見率
0.8% 0.4 0 0.50% 24/4793 EGFR-3 0.74%★ 7/945 ACHE-3 既知阻害薬 再発見率（望ましい構造あたり）
④ 主要結果 (b) ウォーヘッド-残基距離
系最短距離参照
EGFR-best Cys7975.5 Åosimertinib結晶: 3.35 Å
ACHE-best Ser2003.2 Åカルボニル経路
ACHE-best Ser2006.3 ÅMichael acceptor経路
0 4Å 7Å 5.5Å EGFR Cys797 3.2Å★ ACHE Ser(C=O) 6.3Å ACHE Ser(Mic) osimertinib 3.35Å
α-methylene-β-lactone
ACHE最良候補のウォーヘッド — 訓練データ外・二重電親和性（Cys/Ser/Thr/Tyr/Lys反応性）
④ 主要結果 (c) 新規ウォーヘッドの自発的生成

訓練データ（ProteinReactiveDB）に存在しないウォーヘッドモチーフが自発的に生成：

ウォーヘッド文献的根拠
アレン共有結合ウォーヘッドとして文献報告あり
3-oxo-β-スルタム共有結合ウォーヘッドとして文献報告あり
α-methylene-β-ラクトンWang et al.: 5残基クラス反応性確認

→ RLは化学空間を訓練分布外に探索できることを示す重要な証拠

④ 主要結果 (d) モデル設定と閾値
スコアラー閾値
SA (Ertl raw)≤ 6
共有結合活性 (GCNII)p ≥ 0.75
残基親和性 (GAT)p ≥ 0.75
GNN-docking≤ −6.0 kcal/mol
Overlap (Crippen-3D)≥ 100
Tanimoto類似性≥ 0.1（緩い）
QEDなし（化学的安定性のみ）
⑤ テイクホームメッセージ
🔗 共有結合特化スコアリング
GAT残基選択性（Cys 82.7%/Ser 79.1%精度）とGNN-docking近似（R²=0.86）をRLループに統合。従来のRL生成にはなかった共有結合設計軸を追加。
🌏 訓練分布外の探索
アレン・3-oxo-β-スルタム・α-methylene-β-ラクトンが自発的生成。RLが既知データに縛られずに未踏化学空間を開拓できることを実証。
⚖️ Pareto CDで多様性保持
単純な重み付き和では特定スコアに偏るが、Pareto crowding distanceでフロント内の多様性を維持。多目的最適化の実用的解法。
⚡ 高速サロゲートによるRL実用化
GNN-docking近似でRLスケールの評価を実現。上位250構造のみDOCKSTRINGで精密評価するカスケードスクリーニング設計。
ケムインフォへの応用
適用先ユースケース
lib/molgenGAT残基選択性+GNN-dock スコアラー統合
lib/molgenDrugEx LSTM → JobManagerで共有結合生成
lib/dockingUniDock前段GNN-dockingサロゲートフィルタ
lib/dockingProLIFにGradCAM距離計算を統合
本研究のインパクト
  • 共有結合阻害薬向けRL生成パイプラインを初整備
  • GAT残基選択性・GNN-dockサロゲートを提案
  • 訓練外ウォーヘッド自発生成でRLの化学空間探索能を実証
限界: タンパク質特異性が低い・実験検証なし・ACHEモデルR²=0.75は改善余地あり
Gil, arXiv:2604.20019 [cs.LG] · 2026年4月21日 · Category: machine_learning