Y Combinator - How do OpenAI’s o1 and o3 models perform complex reasoning?
'사고의 연쇄'는 복잡한 문제를 해결하기 위해 문제를 작은 단계로 나누는 사고 과정이다. 이는 인간이 문제를 해결하는 방식과 유사하며, 모델이 스스로의 실수를 인식하고 다양한 전략을 시도하며 접근 방식을 조정하도록 한다. 예를 들어, 피자가 8조각으로 나뉘어 있고, 존이 3조각을 먹고 친구가 2조각을 먹었을 때 남은 조각 수를 계산하는 문제를 단계별로 해결한다. 먼저 피자의 총 조각 수를 확인하고, 존과 친구가 먹은 조각 수를 계산한 후, 남은 조각 수를 구한다. 이러한 단계적 접근이 없으면 대규모 언어 모델은 단순히 가장 가능성 있는 답을 예측하려고 할 것이다.
Key Points:
- '사고의 연쇄'는 문제를 작은 단계로 나누어 해결한다.
- 모델은 스스로의 실수를 인식하고 수정한다.
- 다양한 전략을 시도하며 접근 방식을 조정한다.
- 단계적 접근이 없으면 모델은 단순 예측에 그칠 수 있다.
- 구글 브레인 연구진이 2022년에 발표한 개념이다.
Details:
1. 🤖 AI의 사고 체인 활용법
- AI는 복잡한 문제를 해결하는 인간의 사고 방식을 모방하여 사고 체인을 활용한다.
- 질문을 작은 단계로 나누어 처리하고, 각 단계를 진행하면서 자신의 실수를 인식하고 수정하려고 노력한다.
- 기존의 모델에서 '한 단계씩 생각하기' 등의 명령을 통해 사고 체인을 유도한 경험이 있다.
- AI는 답을 단순히 내놓는 것이 아니라, 문제를 체계적으로 접근하여 해결한다.
- AI의 사고 체인은 문제 해결의 효율성을 높이며, 예를 들어, 고객 문제 해결 시간이 50% 감소했다.