arXiv:2609.00189v1 cs.LG

목표 지향 분자 최적화를 위한 엘리트 가중 지도 미세조정

Elite-Weighted Supervised Fine-tuning for Goal-Directed Molecular Optimization

Shiyun Wa, Yifei Wang, Anna G. Green, Simone Sciabola, Ye Wang

제출 2026-08-31

한국어 초록

목표 지향 최적화는 분자 생성기가 원하는 성질을 갖는 후보를 제안하도록 유도하는 데 필수적이다. 그러나 이는 종종 정책 그래디언트 강화학습으로 구현되는데, 이는 모델 구조와 생성 절차에 따라 형태가 달라지는 생성 궤적 로그 확률을 요구한다. 이 때문에 옵티마이저를 아키텍처와 조건부 생성 설계에 걸쳐 재사용하기 어렵다. 지도 미세조정은 그런 장치가 전혀 필요 없지만, 갱신이 고정된 데이터셋에 의해 이끌리므로 보상이 갱신에 반영되지 않는다. 우리는 보상으로 고득점 분자의 엘리트 선택을 안내하고, 그 집합에 대해 모델 고유의 사전학습 손실로 모델을 갱신하는 Elite-Weighted Supervised Fine-tuning(EW-SFT)을 제안한다. ablation은 보상 정보가 선택된 집합 내 연속 가중보다는 주로 엘리트 선택을 통해 전달됨을 보여준다. 갱신이 점수가 매겨진 분자와 모델의 고유 손실만 사용하므로, 동일한 규칙이 autoregressive, masked-diffusion, discrete-flow 생성기와 de novo, motif-extension, linker-design 과제 모두에 적용된다. 두 kinases 참조 화합물에 대해 고정된 3D 형상 정렬 oracle 호출 예산에서 EW-SFT는 해당 기본 옵티마이저를 일관되게 능가한다. 또한 네 개의 held-out 참조에 대해 2D 유사도 oracle 하의 목표 지향 최적화를 더 개선하고, 궤적 수준 RL 공식 없이 sample-efficiency 벤치마크에서도 유사한 성능을 달성한다. 이러한 결과는 EW-SFT가 분자 생성기, 설계 제약, 참조, oracle에 걸쳐 통합적이고 효과적인 옵티마이저임을 보여준다.

원문 초록

Goal-directed optimization is essential for steering molecular generators to propose candidates with desired properties. However, it is often implemented with policy-gradient reinforcement learning, which requires a generation-trajectory log-probability whose form depends on the model architecture and generation procedure. This makes an optimizer difficult to reuse across architectures and conditional generative designs. Supervised fine-tuning needs none of that machinery, but its update is driven by a fixed dataset, so the reward never enters the update. We introduce Elite-Weighted Supervised Fine-tuning (EW-SFT), which uses reward to guide elite selection of high-scoring molecules, and updates the model by its own pretraining loss on that set. Ablations show that reward information is passed primarily through elite selection, rather than through continuous weighting within the selected set. Because the update consumes only scored molecules and the model's native loss, the same rule applies across autoregressive, masked-diffusion, and discrete-flow generators, and across de novo, motif-extension, and linker-design tasks. Under a fixed budget of 3D shape alignment oracle calls on two kinase reference compounds, EW-SFT consistently outperforms the corresponding native optimizers. It further improves goal-directed optimization under a 2D similarity oracle on four held-out references and achieves comparable performance on a sample-efficiency benchmark without a trajectory-level RL formulation. These results demonstrate that EW-SFT is a unified and effective optimizer across molecular generators, design constraints, references, and oracles.

제출 이력

확인된 버전만 표시합니다. 전체 제출 이력은 arXiv 원문에서 확인하세요.

  1. arXiv:2609.00189v1제출 시각 미확인

함께 살펴볼 논문

공통 태그를 근거로 연결했습니다. 실제 인용 관계나 논문의 우수성을 뜻하지 않습니다.

공통 태그로 연결된 공개 논문이 아직 없습니다.

토론

이 논문과 연결된 포럼 글이 아직 없습니다.