앤트로픽에서 클로드 코드를 만드는 애디 오스마니라는 엔지니어가 이달 초 X에 긴 글을 올렸는데요. 첫 문장이 "요즘 하루 중 비판적 사고를 강제하는 게 아무것도 없다"였어요. 일 대부분을 에이전트한테 맡기다 보니 그렇게 됐다고요. 조회가 560만 회 넘게 나왔더라고요. 1. 맡기는 것과 넘겨 버리는 것 이 사람은 AI 쓰는 태도를 세 단계로 나눠요. 결과는 내가 책임지는 '위임', 출력을 검토 없이 다음 입력으로 쓰는 '유예', AI 답이 그냥 내 답이 되는 '인지적 항복'이요. 처음엔 꼼꼼히 읽다가 다음엔 훑고, 그다음엔 뼈대만 보다가 누가 한 줄 물어보면 설명을 못 하게 된다는 거예요. 2. 실험 숫자가 꽤 세요 와튼스쿨에서 1,372명한테 추론 문제를 AI 챗봇이랑 같이 풀게 했더니, 혼자 풀 때 정답률이 46% 정도였는데 AI가 틀린 답을 주니까 31%로 떨어졌대요. 챗봇을 연 사람 열에 여덟은 틀린 조언을 그대로 따랐고요. 3. 모델이 좋아질수록 오히려 더 위험하다고 뻔한 실수가 줄어드니 다시 볼 이유가 없어진다는 거죠. 600줄짜리 PR이 테스트 다 통과해서 승인했는데 중간에 트랜잭션 순서가 바뀌어 있는 식이요. 4. 그래서 본인은 이렇게 한대요 틀려도 별일 없는 건 통째로 맡기고, 뭘 만들지나 배포해도 되는지는 안 맡긴대요. 묻기 전에 내 예상부터 적어 두고, 일주일에 한 번은 에이전트 없이 코드를 짜 본다고 하네요. 요즘 리뷰할 때 실제로 어디까지 읽고 승인하시나요? 팀에서 따로 정한 기준이 있는지도 궁금해요. 출처: 애디 오스마니 X 글 "Critical thinking when agents do the work", 와튼스쿨 쇼·네이브 연구
이직/커리어
AI가 짠 코드 승인해 놓고 설명 못 한 적, 다들 한 번쯤 있으시죠?
11월 15일 | 조회수 140
모
모바일개발자
댓글 0개
공감순
최신순
- 등록된 댓글이 없습니다
첫 댓글을 남겨주세요
추천글