OpenAI가 '대규모 언어 모델이 인간의 지능에 얼마나 근접했는가'를 평가하는 기준을 만든다

OpenAI가 '대규모 언어 모델이 인간의 지능에 얼마나 근접했는가'를 평가하는 기준을 만든다

GPT-4o 등 대규모 언어모델을 개발하는 OpenAI가 대규모 언어모델의 지능이 인간 수준을 얼마나 따라잡고 있는지 보여주기 위한 평가 스케일을 작성했다고 밝혔습니다.

OpenAI의 홍보 담당자가 경제지인 Bloomberg에 말한 바에 따르면, OpenAI의 직원을 위한 전체 회의에서, AI의 새로운 평가스케일이 공유되었다고 합니다.

이 스케일은 레벨 1부터 레벨 5까지 다섯 가지 단계로 구성되어 있으며, 레벨이 올라갈수록 인간을 따라잡고 있다고 평가하게 됩니다.

OpenAI는 현 시점에서의 대규모 언어모델은 레벨 1이며, 레벨 2에 가까워지고 있다고 합니다. OpenAI에 따르면 레벨 2는 박사수준의 교육을 받은 인간과 동등한 기본적인 문제해결 능력을 가진 시스템으로 평가된다고 합니다. 또 레벨 3은 '사용자를 대신해 행동할 수 있다', 레벨 4는 '새로운 혁신을 창출할 수 있다', 최고 단계인 레벨 5는 '조직 전체의 일을 할 수 있다'는 수준으로 설정되어 있다고 합니다.

OpenAI에 의한 새로운 평가 스케일은 로스앨러모스 국립연구소와의 파트너십을 체결한 직후에 도입되었습니다.
생물과학연구의 전진을 위해 AI를 안전하게 사용하는 방법을 공동으로 연구하고 있다는 것입니다.
OpenAI의 미라 무라티 CTO는 로스알라모스 국립연구소와의 제휴에 대해 “공공의 이익에 공헌하는 것을 목표로 하는 민간조직으로서 로스알라모스 국립연구소와 생물과학의 가능성에 대해 연구하는 최초의 파트너십 발표 할 수 있는 것에 흥분하고 있습니다. 이 파트너십은 리스크를 파악하고 리스크를 줄이면서 과학 연구를 진행해 나가는, 우리의 사명의 필연적인 진전을 나타내고 있습니다」라고 말했습니다.

OpenAI는 "대부분의 경제적으로 가치 있는 작업으로 인간을 능가하는 수준에서 고도로 자율적인 시스템"이라며 범용 인공지능(AGI) 개발을 목표로 하고 있습니다. 샘 알트만 CEO는 2023년 10월에 "AGI의 완성에는 앞으로 5년 정도 걸린다"고 발언한 바 있지만, 레벨 5에 상당하는 AGI가 완성되기까지는 방대한 계산 능력과 자금이 필요합니다.

다만, 이 평가 스케일은 어디까지나 잠정적인 것이기 때문에 향후 직원이나 투자자, 이사회로부터의 피드백을 기초로 평가기준이 미세조정될 가능성이 있습니다.

*재미있거나 도움이 되셨다면 '구독' 꾹 눌러 주시기를 부탁드립니다. 늘 행복하세요.

OpenAI Sets Levels to Track Progress Toward Superintelligent AI - Bloomberg
https://www.bloomberg.com/news/articles/2024-07-11/openai-sets-levels-to-track-progress-toward-superintelligent-ai

Here’s how OpenAI will determine how powerful its AI systems are - The Verge
https://www.theverge.com/2024/7/11/24196746/heres-how-openai-will-determine-how-powerful-its-ai-systems-are

Here’s how OpenAI will determine how powerful its AI systems are