AGI o3

https://youtu.be/Nmz9-9aAXEM?si=X5AqvgLS3eMV6VNF

안녕하세요. DIY 연구소 김경현 입니다.

오늘은 OpenAI가 새롭게 선보인 멀티모달 모델(Multimodal Model), o3와 경량화 모델인 o3-mini에 대해 소개해 드리겠습니다. 이 모델들은 2025년에 정식 출시될 예정이며, OpenAI의 기존 모델인 o1의 후속작으로 개발되었습니다. 다만, 영국의 이동통신 브랜드 02와의 상표권 분쟁을 피하기 위해 02 대신 o3로 명명되었습니다.

1. 성능 소개

먼저, o3 모델은 다양한 분야에서 탁월한 성능을 보여주고 있습니다.

SWE-bench에서는 71.7점을 기록하며, 현재까지 공개된 모델 중 최고의 점수를 받았습니다. 이 벤치마크는 GitHub 데이터를 기반으로 실무 코딩 능력을 평가하는데요, 이 점수는 알고리즘 영역에서 상당히 우수한 성능을 나타내지만, 실무 개발의 모든 면에서 인간을 완전히 대체하기는 아직 어렵다는 것을 시사합니다.

Codeforces에서는 상위 0.2%에 해당하는 2727점을 기록했습니다.

2024년 AIME 시험에서도 거의 만점에 가까운 96.7점을 획득했으며, 박사 수준의 과학 문제에서도 87.7점이라는 높은 점수를 기록했습니다.

특히, 인간 전문가 수준의 문제 해결 능력을 평가하는 ARC-AGI 벤치마크에서는 87.5점을 받아, 인간 전문가 기준인 85점을 넘어섰습니다. 이로써 AGI 타이틀을 획득하며 큰 주목을 받았는데요, 다만 높은 점수를 얻기 위해 문제당 약 500만 원에 달하는 비용이 소요된 점은 논란의 여지가 있습니다.

이 외에도 가장 쉬운 문제조차 국제수학올림피아드 수준인 Frontier Math에서 25.2점을 기록하며 잠재력을 입증했는데, OpenAI의 개발자 Will Depue는 2025년 말까지 Frontier Math에서 90점을 기록하는 모델을 선보이겠다고 예고했습니다.

2. o3-mini 모델

o3-mini는 o3의 경량화 모델로, 비용 면에서 훨씬 경제적이면서도 성능은 기존의 o1 모델을 상회하거나 필적하는 수준입니다.

특히, Codeforces에서 적은 비용으로 o1을 능가하는 성과를 보였고, o3-mini(low) 와 o3-mini(medium) 버전은 성능과 비용의 균형 면에서 매우 우수하다는 평가를 받고 있습니다. 앞으로 o3-mini는 o1의 대체재로 자리잡을 가능성이 높습니다.

3. 타임라인 및 전망

2024년 12월 21일, OpenAI는 연구자들을 대상으로 안전 테스트를 위한 얼리 액세스를 시작했으며, 정식 출시는 2025년으로 예정되어 있습니다.

OpenAI의 개발자 Noam Brown은 최근 자신의 X 계정을 통해 o3의 성능이 o1 대비 비약적으로 발전한 그래프를 공개하며, 이러한 추세가 지속될 것이라는 기대를 밝혔습니다.

이처럼 o3와 o3-mini는 추론형 AI의 새로운 가능성을 열어가고 있는데요. AGI에 도달하기 위한 OpenAI의 도전이 어떤 결과를 가져올지 앞으로도 많은 관심 부탁드립니다.

시청해 주셔서 감사합니다.

https://cafe.daum.net/diylab

DIY연구소

https://youtu.be/YejBmLY2848?si=Ci0J3c1Aao7hMcg

https://youtu.be/mwxnKd-Fdr4?si=_O_FH_UMPiHVEkSU

https://youtu.be/CRuhyF3oj0c?si=cmw94CeeZmh43Smg

https://youtu.be/8AHUorhqDVM?si=icAw-tYffWFOjhl7

https://youtu.be/EexT_SOuLWI?si=MkrRQWMzAu6cnL1i

https://youtu.be/vc2-Tvc9ZSs?si=0sDqiG2N-fz7KY7i

https://youtu.be/EexT_SOuLWI?si=MkrRQWMzAu6cnL1i

https://youtu.be/vc2-Tvc9ZSs?si=0sDqiG2N-fz7KY7i