저도 비슷하게 구축했는데 오탐율 줄이려면 프롬프트에 "false positive 최소화"를 명시적으로 넣고, 심각도 기준을 명확하게 정의해주니까 훨씬 나아지더라고요. 그리고 팀의 코딩 스타일 가이드를 프롬프트에 포함시키는 것도 도움이 됩니다. API 비용은 저희는 배치 API 써서 좀 절감했어요.
딥러너
저도 비슷하게 해봤는데 오탐 줄이려면 프롬프트에 "false positive를 피하고 high confidence인 것만 리포트하라"고 명시하는 게 도움 됐어요. 그리고 팀의 코딩 컨벤션을 프롬프트에 넣으니까 훨씬 정확해지더라고요. 비용은 저희도 배치로 처리해서 줄였습니다.