OpenAI称,公司推出MedChemBench基准测试集,用于评估AI模型在药物化学研究相关推理任务上的表现。该测试检验模型能否将分子结构与实验证据关联起来,解释实验结果、对比化合物并预测其性质。打造能够可靠支撑这类研究的AI,是助力科学家研发更优质药物的一步。MedChemBench基于已发表研究整理出99道测试题,以此衡量上述能力。在超高推理模式下,GPT 6.2Astra得分84.5%,GPT 6Astra为83.3%,GPT 6.1Sol为82.0%,GPT 5.6Sol为58.2%。GPT 6Astra在重构分子结构、解读实验证据方面表现最优,但筛选化合物、预测数值性质对该模型而言难度更高。(新浪财经)
