인공지능 AI 코딩 실력 GPT-5 vs Claude 비교

방법 알려주고 테스트한 결과

바구니 세 개에 물을 모두 담는 간단한 미션으로 테스트를 진행했어요. 먼저 사람이 해결 방법을 자세히 알려주고 코딩을 요청하는 방식으로 시작했습니다.

GPT-5 생각 모드에서는 ‘빠른 답변 받기’를 누르지 않고 끝까지 기다렸을 때 미션을 완수했어요. 바구니에 물을 담는 기본 동작뿐만 아니라 수도꼭지 조준 같은 세부 조건까지 지켰죠. 보통 모드에서도 같은 결과가 나왔습니다.

반면 Claude Opus 4.1은 방법까지 알려줬는데도 실패했어요. 물은 세 바구니에 모두 담았지만, 수도꼭지를 가운데 바구니에 조준해야 한다는 조건을 놓쳤습니다. 이전 Claude 모델보다는 나아졌지만, GPT-5보다는 아직 한 걸음 뒤처지는 모습이었어요.

이 테스트로 알 수 있는 건, 방법까지 알려주는 상황에서는 GPT-5가 더 안정적으로 코드를 만들어 낸다는 점입니다. Claude는 아직 세부 조건까지 완벽하게 반영하는 데 약간의 한계가 있네요.

방법 없이 그냥 시켰을 때 결과

이번에는 해결 방법을 전혀 알려주지 않고 “해 달라”고만 요청했어요. AI가 알아서 방법을 고민해야 하는 더 어려운 조건입니다.

GPT-5 생각 모드와 보통 모드 모두 실패했어요. 코드는 만들었지만 실행해 보니 물이 제대로 담기지 않았습니다. Claude도 당연히 실패했습니다.

이 결과는 이전 GPT 모델들에서도 비슷했어요. 방법을 알려주면 성공하고, 알려주지 않으면 실패하는 패턴이 GPT-5에서도 그대로 나타난 거죠. Claude 최신 모델이 방법 제시 상황에서 실패한 건 조금 의외였습니다.

결국 AI 코딩 실력 비교에서 ‘방법 제시 여부’가 성능을 가르는 중요한 변수라는 걸 다시 확인할 수 있었어요.

실제 코딩 작업에 적용하는 팁

이 테스트 결과를 실무에 어떻게 활용할지 정리해 봤어요.

첫째, 중요한 프로젝트라면 처음에 구체적인 방법을 함께 제시하세요. GPT-5라도 방법 없이 맡기면 실패 확률이 높아집니다.

둘째, Claude를 사용할 때는 결과물을 한 번 더 검토하는 습관을 들이세요. 특히 세부 조건이 많은 작업에서는 놓치는 경우가 있었어요.

셋째, 빠른 답변 받기 기능은 신중하게 사용하세요. GPT-5 생각 모드에서 중간에 끊으면 성공률이 떨어졌습니다.

이 테스트 하나로 모든 AI 성능을 판단할 수는 없지만, 실제 코딩 작업에서 GPT-5와 Claude를 선택할 때 참고할 만한 기준은 분명해졌어요. 테스트에 사용한 프롬프트와 코드는 ‘코드 깎는 노인’ 사이트에서 확인해 보실 수 있습니다.