데이터 메시

4장

셀프 서비스 데이터 플랫폼의 원칙

 

 

 

 

 

단순함은 당연한 것을 제거하고 의미 있는 것을 더하는 것이다.

— 존 마에다^{John Maeda}, 『단순함의 법칙』(럭스미디어, 2017) p.143 발췌

 

지금까지 두 가지 데이터 메시의 원칙으로 기존 데이터 아키텍처를 데이터 메시로 전환하는 방법을 소개했습니다. 하나는 비즈니스 도메인별로 분산된 데이터 오너십에 대한 원칙이고, 다른 하나는 데이터를 사용하기 적합하고 가치 있는 제품처럼 공유하는 원칙입니다. 그러나 이러한 원칙들로 인해 데이터 아키텍처가 간단하고 직관적으로 전환되면서 예기치 않은 결과를 일으킬 수 있습니다. 각 도메인에서 진행하는 작업이 중첩되어 운영 비용이 증가하거나, 도메인 전반에 호환이 이뤄지지 않는 문제가 조직 곳곳에서 발생할 가능성이 높아집니다.

도메인 엔지니어링 팀이 애플리케이션을 구축하고 디지털 프로덕트를 유지 관리할 뿐만 아니라 분석 데이터를 프로덕트 형태로 소유하고 공유할 것을 요구하면 실무자와 리더^leader 모두에게 우려 사항이 발생합니다. 필자가 자주 듣는 우려 사항은 다음과 같습니다.

• 모든 도메인이 자체적으로 데이터를 빌드하고 소유한다면 거기서 나온 비용을 어떻게 관리해야 할까요?

• 구인하기도 어려운 데이터 엔지니어를 모두 도메인 직원으로 채용하려면 ...