저도 비슷하게 구축했는데 오탐율 줄이려면 프롬프트에 "false positive 최소화"를 명시적으로 넣고, 심각도 기준을 명확하게 정의해주니까 훨씬 나아지더라고요. 그리고 팀의 코딩 스타일 가이드를 프롬프트에 포함시키는 것도 도움이 됩니다. API 비용은 저희는 배치 API 써서 좀 절감했어요.
딥러너
저도 비슷하게 해봤는데 오탐 줄이려면 프롬프트에 "false positive를 피하고 high confidence인 것만 리포트하라"고 명시하는 게 도움 됐어요. 그리고 팀의 코딩 컨벤션을 프롬프트에 넣으니까 훨씬 정확해지더라고요. 비용은 저희도 배치로 처리해서 줄였습니다.
따뜻한코더
저도 비슷하게 구현해봤는데 오탐 줄이려면 프롬프트에 "false positive 줄이기"를 명시적으로 넣는 게 도움이 되더라고요. 그리고 심각도 레벨을 나눠서 높은 것만 알람하니까 주니어들 혼동이 줄었어요. 비용은 배치 처리로 하루에 한 번만 돌려서 어느 정도 커버했습니다.