OpenAI、99問の医薬品化学ベンチマーク「MedChemBench」公開 GPT-6.2 Astraは84.5%

117本の論文・特許と761の分子構造から作られ、分子の再構成、結果の説明、化合物の順位付け、物性予測を課す。xhigh設定でGPT-6.2 Astraは84.5%、GPT-5.6 Solは58.2%。公表されているのはOpenAIのモデルのみ。
なぜ重要か
医薬品化学は創薬の中核的なボトルネックで、化合物のある性質を改善すると別の性質が悪化しうる。MedChemBenchは、がん研究のPRMT5阻害剤など実際の研究プログラムの証拠を使い、モデルがその兼ね合いを推論できるかを測る。スコアはGPT-5.6 SolからGPT-6 Astraへの大きな伸びを示すが、最新モデル間の差は小さい。現時点ではOpenAIのモデルのみで、他社の結果が出るかが焦点。
要点
- 117本の論文・特許から99問
- 761の異なる分子構造
- GPT-6.2 Astra:xhighで84.5%
- GPT-6 Astra 83.3%、GPT-6.1 Sol 82.0%、GPT-5.6 Sol 58.2%