2주 전 · ai

머신러닝 어드벤트 캘린더 보너스 1: Excel에서 AUC

AUC는 선택된 임계값과 무관하게 모델이 양성을 음성보다 얼마나 잘 순위 매기는지를 측정합니다. The post The Machine Learning “Advent Calendar” Bonus 1: AUC...

2주 전 · ai

곡선 아래의 에이전트 (AUC)

귀하의 에이전트 기반 솔루션이 실제로 더 나은지 이해하기 위해 Towards Data Science에 처음 게재된 “Agents Under the Curve AUC” 포스트…

1개월 전 · ai

System prompts를 Ground Truth로 사용하여 평가하는 방법

문제: 명확한 Ground Truth 부족 대부분의 팀은 명확히 정의된 Ground Truth가 없어서 AI 에이전트를 평가하는 데 어려움을 겪는다. 일반적인 workflow: ...

1개월 전 · ai

중요한 것을 측정하기: 이미지 생성 평가를 위한 객관적 메트릭

최첨단(state‑of‑the‑art) 모델을 사용한 고품질 시각 자료 생성이 점점 더 접근하기 쉬워지고 있습니다. 오픈소스(Open‑source) 모델은 노트북에서 실행되고, 클라우드 서비스는 tex...