생명과학 이미지 AI 평가, 제미나이 4 카본 등 모델 비교

요약

아티피셜 애널리시스가 19개 AI 모델을 대상으로 생명과학 이미지 평가 기준인 VIALS-AA 결과를 발표했습니다. 이 평가는 핸드셰이크 AI의 VIALS를 독립적으로 구현한 시험입니다. 평가 결과, 제미나이 4 카본이 161개 과제 중 103개를 세 번 모두 맞혀 64%의 점수를 기록했습니다. GPT-6 아스트라가 63%, 클로드 오푸스 5.5가 61%를 기록했습니다. VIALS-AA는 실제 연구 환경의 시각 자료를 활용하여, 단순히 정보를 찾는 것을 넘어 지식 적용 능력을 평가하도록 설계되었습니다. 각 과제는 연구 이미지와 질문, 정답으로 구성됩니다. 모델별로 강점을 보이는 분야가 확인되었는데, 제미나이 4 카본은 플라스미드 지도와 계통수 분석에서 강점을 보였으며, 클로드 소넷 5.5는 세포 수 세기에서 높은 점수를 기록했습니다. 평가에서는 모델의 성능 외에도 문항당 비용 효율성도 중요한 지표로 다뤄졌습니다. 예를 들어, GPT-6.1 솔은 클로드 오푸스 5.5보다 점수 차이는 적었으나 문항당 비용이 약 30분의 1 수준이었습니다. 이 평가는 모델의 실제 연구 성과를 의미하는 것은 아니며, 각 모델의 특정 환경에서의 반복 정답률과 비용 구조를 비교한 결과입니다.

AI가 원문을 요약한 내용으로, 부정확할 수 있습니다. 투자 판단의 근거로 삼기 전에 원문을 확인하세요.