OpenAI, 생물학용 AI 평가 도구 GeneBench-Pro 공개
OpenAI는 생물학 연구에서 가 복잡한 판단을 얼마나 잘하는지 재는 벤치마크인 를 공개했다. 이 평가는 깨끗하게 정리된 문제를 푸는 능력이 아니라, 지저분한 연구 데이터를 보고 어떤 분석이 맞는지 고르고, 가정을 고치고, 결과가 실제 결정에 쓸 만큼 믿을 만한지 판단하는 능력을 본다. 총 129개 문제가 유전체, 정량 생물학, 임상·진단, 암 유전체, 단백질 분석 등 10개 영역에 걸쳐 있다.
문제는 로 만들어져 정답 구조를 알 수 있고, 일부 문제는 외부 전문가 검토를 거쳐 현실성과 난이도를 확인했다. AI는 짧은 지시문, 데이터 파일, 파이썬과 기본 생물정보학 도구가 있는 작업 공간을 받고 스스로 분석해야 한다. OpenAI의 은 가장 높은 추론 설정에서 28.7%, Pro 모드에서 31.5%를 통과했으며, 초기 GeneBench 제작 당시 GPT-5가 5% 미만이던 것보다 크게 올랐다.
그래도 가장 강한 모델도 3분의 1 미만만 해결해, 현재 AI는 전문가를 대체하기보다 연구 흐름을 잡고 데이터 문제를 찾는 보조 역할에 더 가깝다. Anthropic도 라는 과학자용 AI 작업대를 내놓으며, 주요 AI 회사들이 일반 챗봇을 과학·의료 연구용 도구로 넓히는 흐름이 뚜렷해졌다.
핵심 포인트
- 는 생물학 연구에서 의 실제 판단 능력을 재는 벤치마크다.
- 평가는 129개 문제와 10개 연구 영역을 포함하며, 일부 대표 문제는 공개됐다.
- 은 최고 추론 설정에서 28.7%, Pro 모드에서 31.5%를 통과했다.
- 전문가가 한 문제를 푸는 데 보통 20~40시간이 걸릴 정도로 난도가 높게 설계됐다.
- 현재 AI는 전문가 대체보다 분석 경로 제안, 데이터 이상 탐지, 반복 작업 보조에 더 적합하다.
이 사건을 다룬 원문 (8)
- OpenAI NewsOpenAI, 생물학용 AI 평가 도구 GeneBench-Pro 공개 ↗
- r/OpenAIUnchecked AI progress may pose catastrophic risks, UN panel warns ↗
- Google AI BlogThe latest AI news we announced in June 2026 ↗
- r/OpenAIHuge benchmark update ↗
- r/ClaudeAIClaude Science, an AI workbench for scientists, is now available ↗
- OpenAI NewsCore dump epidemiology: fixing an 18-year-old bug ↗
- OpenAI NewsInside Genebench-Pro ↗
- Anthropic News (mirror)Claude Science, an AI workbench for scientists, is now available ↗