
251
6
장
모니터링과 로깅
적으로 지연이 발생한다. 자동화는 멍청한 절차를 없애고 팀 전체에 중요한 정보에 대한 접근
성을 크게 높인다는 장점이 있다.
업무 자동화나 지식의 객관성과 수평성을 가늠하는 간단한 테스트 중 하나로 버스 테스트
9
라는
것이 있다. 필자가 몸담았던 스타트업 이야기를 잠깐 해보겠다. 영업판매 부서의 리더가 나에
게
CSV
파일들과 새로운 정보들을 적어서 보내면, 필자는 해당 데이터에 복잡한 연산을 적용
하여 몇몇 수치들을 얻어낸 다음 다시
CSV
파일에 작성하고 이를
PDF
파일로 변환하여 회신
해야 했다. 이런 끔찍한 업무처리 방식은 굉장히 확장성이 떨어진다는 문제가 있다. 아마도 이
조직은 버스 테스트를 통과하지 못할 것 같다.
만약, 오늘 내가 갑자기 버스에 치이는 사고를 입어 병원에 드러누워도 나를 제외한 모든 사람
들이 일하는 데 지장이 없을 수 있을까? 당신도 버스 테스트를 해보자. 측정항목을 만들기 위
한 노력이나 다양한 요소를 자동화하기 위한 노력들은 머신러닝 모델의 강인한 배포와 운영을
위한 기본 전제라고 할 수 있다.
6.4.1 6.4.1
모델 모니터링의 기초모델 모니터링의 기초
‘머신러닝 운영’을 모니터링하는 일은 시스템의 전체 상태, 서비스 현황, 모델 성능 등 모든 것
과 연관될 수 있다. 모델 모니터링은 데이터 분석가들이 ...