AI 쓴 쪽이 50점, 손으로 짠 쪽이 67점, 그럼 나는 뭘 키우고 있나
AI 코딩 도구가 초보의 실력이 자라는 길을 끊어버린다는 글이 돌길래 읽어봤다. 나는 코딩을 못 하면서 AI한테 시켜서 도구를 만들어 쓰는 쪽이라, 남 얘기가 아니었다.
요즘 좀 걸리는 게 있었다. 나는 코딩을 배운 적이 없고, 필요한 건 전부 AI한테 시켜서 만든다. 자동화도 그렇게 붙였고 지금도 돌아간다. 근데 몇 달째 이러고 있으면서 정작 "내가 뭘 할 줄 알게 됐나" 물으면 답이 애매하더라. 시키는 건 늘었는데 짤 줄 아는 건 그대로인 것 같고. 그러다 AI 의존이 코딩 전문성의 성장 경로를 무너뜨린다는 글 소개를 봤다 (news.hada.io). 딱 내 자리를 겨냥한 얘기라 그냥 넘기기가 좀 그랬다.
📑 목차
1. 실험에서 나온 숫자
제일 세게 걸린 건 앤트로픽이 올해 초에 내놓은 실험이다. 주로 경력 짧은 개발자 52명을 무작위로 두 조로 갈라, 파이썬 라이브러리 하나를 써서 기능 두 개를 구현하게 하고 끝나고 퀴즈를 풀렸다 (anthropic.com). 결과는 AI 조가 평균 50점, 직접 손으로 짠 조가 67점 (anthropic.com). 학점으로 치면 두 단계쯤 벌어진 차이라고 적혀 있다.
여기서 진짜 아픈 건 다음 대목이다. 두 조의 과제 완료 시간 차이는 2분 남짓이었고, 그마저도 통계적으로 유의하지 않았다 (anthropic.com). 빨리 끝내려고 AI를 쓰는 건데, 이 실험 조건에선 빨라지지도 않으면서 남는 게 덜 남은 셈이다. 앤트로픽 쪽 결론도 "생산성 이득이 AI가 만든 코드를 검증하는 데 필요한 기술의 발달을 해칠 수 있다"는 방향이다 (anthropic.com).
▲ AI 지원 그룹 퀴즈 평균 50점, 직접 코딩 그룹 67점, 완료 시간 차이는 약 2분으로 통계적 유의성 없음 (자체 제작 이미지)
원문 글은 다른 연구도 같이 끌어온다. 소개글에 따르면 젯브레인스가 인용한 연구에선 AI에 크게 기댄 참가자가 중요한 계획 단계를 건너뛰었고, 펜실베이니아대 쪽 2025년 연구에선 일반 LLM을 쓴 학생이 교과서만 본 학생보다 성적이 17% 낮았다 (news.hada.io). 같은 연구에서 학생이 스스로 풀도록 유도하는 형태의 튜터를 붙였더니 127% 높은 성과가 나왔다고 하고 (news.hada.io). 이 두 건은 나도 논문 원문까지 열어본 게 아니라 소개글에 적힌 대로만 옮긴다. 원문 글 자체도 접속이 막혀서 못 읽었다. 그러니 이 문단은 "이런 숫자가 인용되고 있다"까지가 내가 말할 수 있는 전부다.
2. 초보자는 뭘 물어야 할지를 모른다
숫자보다 오래 남은 건 논지 쪽이었다. 소개글이 정리한 축은 두 개다 (news.hada.io).
하나는 숙련자 역설. AI를 잘 부리는 능력이라는 게 결국 계속 AI를 쓰면 약해지는 바로 그 능력과 같은 것이라는 얘기다. 지금 AI를 제일 잘 쓰는 사람은 AI 없이 오래 굴러본 사람인데, 그 사람이 계속 AI만 쓰면 그 밑천이 닳는다. 다음 세대는 애초에 밑천을 쌓을 구간이 없고.
다른 하나가 초보자의 딜레마인데 이게 더 아프다. LLM을 제대로 쓰려면 먼저 방향을 잡아줘야 하는데, 초보는 무엇을 물어야 하는지 자체를 모른다는 것. 경험이 쌓여야 좋은 질문이 나오는데, 그 경험을 쌓을 자리를 AI가 먼저 채워버린다. 순서가 뒤집혀 있다는 지적이다.
그래서 원문 글은 마찰을 먼저 겪으라고 한다. 손끝의 감각 같은 걸 뜻하는 독일어 단어를 끌어와서, 그건 막히고 헤매는 과정에서만 생기는 거라 우회하면 직관이 안 자란다는 논지 (news.hada.io). 대신 AI는 코드 생성기가 아니라 대화형 문서나 소크라테스식 연습 상대로 쓰고, 기계적인 작업을 넘기는 것과 인지 부채를 지는 것을 구분하고, 나온 걸 공식 문서나 직접 실험으로 검증하라는 쪽 (news.hada.io).
댓글 쪽 반응도 갈리더라. 경영진이 "AI 없이 코드 쓰면 잘못된 것"이라고 지시하는 판이라는 현실론, 나쁜 코드가 다음 AI의 학습 데이터가 되는 악순환 얘기, 반대로 최상급 엔지니어한테는 AI가 확실히 생산성을 올려주고 고차원 문제는 여전히 사람 몫이라는 낙관론까지 (news.hada.io). "전문성 공급망 붕괴"라는 표현도 나왔고. 다들 자기 자리에서 보고 있는 게 다른 듯하다.
3. 그럼 나는 뭘 키우고 있나
여기서 내 자리를 좀 정직하게 놓자면, 나는 이 논쟁의 "초보 개발자"도 아니다. 개발자가 될 생각이 없는 사람이 AI로 도구를 만들어 쓰는 쪽이다. 그래서 처음엔 좀 안심했다. 어차피 안 배울 건데 안 늘어도 그만 아닌가 싶어서.
근데 앤트로픽 결론의 그 문장이 계속 걸린다. 검증할 능력이 안 자란다는 부분. 나온 걸 검증하는 건 초보든 아니든 결국 내가 해야 하는 일이고, 실제로 몇 번 크게 데었다. 방향이 틀린 줄 모르고 계속 간 적이 있었고(그 얘기는 여기), 내가 채점하면 늘 통과가 나온다는 걸 알고 나서 채점자를 따로 분리해두기도 했다(검증 게이트 얘기). 그 두 번 다 나를 구한 건 코딩 실력이 아니었다. "이거 좀 이상한데" 하고 멈춘 감각이었지.
그래서 요즘 내가 늘고 있다고 느끼는 건 이런 것들이다. 어디까지 맡기고 어디서 손을 뗄지 정하는 선긋기, 결과를 그대로 안 믿고 어디를 찔러볼지 고르는 눈, 안 되는 걸 붙잡고 있다가 접는 타이밍. 문법은 여전히 하나도 모른다.
문제는 이게 진짜 다른 종류의 실력인지, 아니면 그냥 실력 없음을 좋게 부른 말인지 내가 판단을 못 한다는 거다. 저 감각들이 결국 코드를 읽어봐야 생기는 거라면, 원문 글 논지가 맞고 나는 지금 밑천 없이 감으로 버티는 중인 게 된다. 잘 알지도 못하면서 주절거린 것 같긴 한데, 적어도 "안 배워도 되겠지"라고 넘겨온 건 좀 성급했던 듯. 3줄 요약 - 앤트로픽 실험에서 AI 쓴 조는 퀴즈 50점, 직접 짠 조는 67점, 완료 시간 차이는 2분 남짓에 유의하지도 않았다. - 원문 글의 축은 두 개다. 잘 쓰는 능력은 쓸수록 닳고(숙련자 역설), 초보는 뭘 물어야 할지를 모른다(초보자의 딜레마). - 나는 코딩 실력 말고 선긋기·검증·접기 같은 감각이 느는 중인데, 그게 코드를 읽는 힘 없이도 유지되는 건지는 모르겠다.
다음에 뭘 만들 땐 완성본을 받기 전에 "왜 이렇게 했는지"부터 한 번 물어봐야 하나 싶다. 그게 마찰 흉내에 그칠지, 진짜 남는 게 있을지는 해봐야 알겠고.
이 글은 정보 제공 목적이며, 작성 시점(2026년 8월) 기준이다. 인용한 연구 수치와 주장은 원 출처가 갱신되거나 해석이 달라질 수 있다. 원문 글(larsfaye.com)은 접속이 막혀 직접 읽지 못했고, 그 내용은 GeekNews 소개글에 적힌 범위까지만 옮겼다. 특정 도구나 학습 방식을 권유·보장하지 않는다.
참고한 공식 자료 - 소개글·댓글 원문: GeekNews, AI 의존이 코딩 전문성의 성장 경로를 무너뜨릴 수 있음 - AI 지원과 코딩 기술 형성 실험(52명 RCT): Anthropic, How AI assistance impacts the formation of coding skills