<AI 제품을 처음 만들게된 PM에게> 시리즈
3️⃣ Part 3. AI 제품의 품질 판단 기준 

Part 3. 핵심 요약

- AI 제품은 기능이 작동한다고 해서 ‘좋은 제품’이 아니다.
- 속도(Latency), 정확도(Accuracy), 비용(Price)에 더해, 신뢰와 윤리성(Trust and Safety)까지 고려해야 한다.
- 이를 관리하고 팀의 판단 기준을 세우는 것이 바로 ‘평가(Evaluation)’의 역할이다.

 AI 제품을 만들고 운영하다 보면 자연스럽게 이런 질문과 마주하게 된다.

“우리는 지금 잘하고 있는 걸까?”

기존 제품은 기능이 명확하고, 그 기능이 의도대로 작동하면 품질을 판단할 수 있었다. 하지만 AI 제품은 그렇지 않다. 입력과 맥락에 따라 결과가 달라지고, 사용자의 기대와 모델의 반응이 항상 일치하지 않기 때문이다.