개발 프로젝트AILLM
고친 자리 옆에 결함이 다시 생긴다 — 일본어 재구성과 “사람에게 넘기기”
일본어 기사 재구성을 여섯 회차 고쳐도 결함이 자리만 옮겨 결국 "AI 초안 + 사람 검수"를 택했는데, 그 판단의 근거였던 실험 두 회차가 플래그 버그로 의도한 조건에서 돌지 않았음을 뒤늦게 찾은 기록.

콘캣의 기술과 경험을 아티클로 살펴보세요.
일본어 기사 재구성을 여섯 회차 고쳐도 결함이 자리만 옮겨 결국 "AI 초안 + 사람 검수"를 택했는데, 그 판단의 근거였던 실험 두 회차가 플래그 버그로 의도한 조건에서 돌지 않았음을 뒤늦게 찾은 기록.

모범 답안을 떨어뜨리고 덜 담은 글을 통과시키던 LLM 품질 게이트를 의심하며, "검출 0건"이 문제없음의 증거가 아니었던 사례들과 검사기 자체를 먼저 시험하는 법을 정리한 기록.

3줄 요약 AI 에이전트는 그럴듯하게 틀려요. 테스트가 통과해도, 설명이 논리적이어도요. 그래서 사고가 날 때마다 그날 규칙을 남겼어요. 규칙은 문서보다 자동 검사로 지킬 때 오래가요. 무엇을 했나 보장플러스는 보험 보장분석 웹 서비스예요. 자바로 만

기사 재구성 구조를 한 번에 쓰기 → 문단 단위 → 문단 묶음 → 블라인드 2콜로 세 번 바꾸며, 콜 수가 65% 줄어도 비용은 20%만 준 이유와 모델 교체 뒤 돌아온 베끼기를 측정으로 따라간 기록.

같은 기사의 조회수가 화면마다 100·3·7로 달랐고, 새로고침해도 오르지 않았고, 리포트에서는 0회 기사가 사라졌다. 셋 다 카운터 고장이 아니라 정의의 문제였던 기록.
