데이터 신뢰성Datadog
Datadog로 보는 AI agent 개선 사례, trace-평가-실험 루프 만드는 방법
AI 에이전트가 이상해졌을 때 감으로 고치지 말고 trace 데이터로 가설을 세우고 평가와 실험으로 검증하는 5단계 루프를 Datadog이 제안해요
태그
LLM evaluation
‘LLM evaluation’ 태그가 달린 글 3건
마테크
AI 트렌드
데이터
Datadog AI Golden Paths, 데이터로 코딩 에이전트 표준화하기
Datadog가 사내 개발자 50개 팀이 AI 코딩 에이전트를 쓸 때 지켜야 할 표준 워크플로우를 만들고, 실제로 효과가 있는지 데이터로 검증한 방법을 공유했어요
Datadog(데이터 신뢰성)
연구소/벤더
TutorMoments: AI 튜터가 학생을 도울 때와 물러날 때를 구분할 수 있을까
AI 튜터가 학생 문제를 바로 풀어주는 대신 스스로 생각하도록 밀어붙일 줄 아는지를 측정하는 평가 프레임워크예요
HuggingFace