Part 1 · Ch05 · Context Intelligence
결과 — 실제 비용 vs Meta 데이터
CI 없는 조직의 baseline
계속
agent hallucination + missed context →
human correction 비용
이 끊이지 않음
< 50%
여러 팀에 걸친 버그 →
첫 진단 정확도
가 절반도 안 됨
2.5×
Mis-triaged 버그 → 팀 사이를 떠돔. 정확히 triage된 것보다
2.5배 더 자주 핑퐁
수일~수주
여러 service가 걸린 대형 incident →
root cause 찾는 데 걸리는 시간
CI 도입 후 (Meta 내부)
+15~20%
agent의 eval 성능 평균 향상
모델이 똑똑해진 게 아니다.
같은 agent에 정리된 organizational context를 줬더니
결과가 달라졌다. agent의 capability는 모델 weight만으로 결정되지 않는다 —
무엇을 줄지가 capability의 일부
다.
← 이전
☰ 목차 · 55 / 150
다음 →