AI 생성 코드의 타입 사용 패턴 분석

초록

본 연구는 TypeScript 프로젝트에서 AI 코딩 에이전트와 인간 개발자가 타입 관련 구문을 어떻게 다르게 사용하는지를 실증적으로 조사한다. AI는 ‘any’ 키워드 사용이 인간보다 9배 높고, 고급 타입 구조와 타입 회피 안티패턴을 더 많이 도입한다. 그럼에도 불구하고 AI가 만든 PR은 인간보다 1.8배 높은 승인율을 보인다. 연구 결과는 AI와 협업 시 타입 안전성을 별도로 검증할 필요성을 강조한다.

상세 분석

이 논문은 TypeScript라는 정적 타입 언어를 대상으로 AI 코딩 에이전트가 타입 시스템을 어떻게 활용하는지를 정량적으로 분석한다. 데이터는 AIDev 데이터셋에서 추출한 38,979개의 PR 중, 정규표현식 기반 1차 필터링과 GPT‑4o 기반 2차 LLM 검증을 거쳐 최종적으로 AI(545개)와 인간(269개) PR을 확보하였다. 필터링 파이프라인은 높은 Recall(0.85)과 정확도(0.74)를 보였으며, LLM 단계에서 정확도와 정밀도가 1.0에 도달했다는 점이 주목할 만하다.

RQ1에서는 ‘any’ 키워드 도입 빈도를 비교했는데, AI PR의 평균 any 추가 횟수는 2.16회, 인간은 0.24회로 9배 차이를 보였다. Mann‑Whitney U 검정(p≈2.33×10⁻⁷, Cohen’s d=0.32)으로 통계적 유의성을 확인했다. 특히 Cursor 모델은 any 추가 대비 제거 비율이 2.46으로 가장 높은 반면, Copilot은 any를 오히려 감소시키는 경향을 보였다. 이는 AI가 타입 안전성을 희생하면서도 빠른 구현을 추구한다는 가설을 뒷받침한다.

RQ2에서는 고급 타입 구조(제네릭, 유니온, 인터섹션 등)와 타입 회피 안티패턴(Non‑null assertion, type assertion) 사용을 측정했다. AI는 평균 5.5~6.7개의 고급 타입 피처를 PR당 사용한 반면, 인간은 2.66개에 머물렀다(p<5.5×10⁻⁵, Cohen’s d=1.45). 이는 AI가 복잡한 타입 구문을 남용하거나, 컴파일 타임 검사를 우회하는 코드를 더 많이 삽입한다는 의미다.

RQ3에서는 PR 승인율을 비교했는데, AI PR의 거절률은 42.6%였지만 승인률은 45.8%로 인간(25.3% 승인, 2.6% 거절)보다 현저히 높았다(χ²=27.52, p<0.0001, Cramér’s V=0.32). 이는 리뷰어가 AI가 만든 코드를 별다른 검증 없이 받아들이는 경향이 있거나, AI PR이 주로 단순 버그 수정·리팩터링 같은 낮은 위험도 작업에 집중했을 가능성을 시사한다.

위 결과를 종합하면, AI 에이전트는 타입 안전성을 저해하는 ‘any’와 안티패턴을 과다 사용하지만, 높은 승인율 때문에 장기적으로 기술 부채가 누적될 위험이 있다. 연구자는 AI와 협업 시 자동 생성 코드를 반드시 정적 분석 도구와 인간 리뷰를 통해 재검증할 것을 권고한다. 또한, 정규표현식 기반 필터링의 한계와 LLM 편향성을 위협 요인으로 명시하며, 향후 AST 기반 정밀 분석과 다양한 언어·프레임워크에 대한 확장이 필요함을 강조한다.