데이터 엔지니어를 위한 97가지 조언

88 데이터 메시와 메시를 망치지 않을 방법

 

바 모지스(Barr Moses), 리오르 개비시(Lior Gavish)

우리는 소프트웨어 엔지니어링 팀이 어떻게 모놀리식 애플리케이션에서 마이크로서비스 아키텍처로 전환했는지를 목격했습니다. 데이터 메시는 여러 가지 면에서 마이크로서비스의 데이터 플랫폼 버전으로 볼 수 있습니다.

이 용어를 최초로 설계한 세막 데그하니Zhamak Dehghani가 처음 정의한 바에 따르면, 데이터 메시는 도메인 지향의 셀프 서비스 설계를 활용해서 기업 데이터가 어디에나 있다는 특징을 수용하는 일종의 데이터 플랫폼 아키텍처입니다. 이는 에릭 에반스Eric Evans의 도메인 중심 설계 이론을 차용한 것으로, 원래의 이론은 코드 구조와 언어를 대응되는 비즈니스 도메인에 맞추는 유연하고 확장 가능한 소프트웨어 개발 패러다임에 관한 것입니다.

하나의 중앙 데이터 레이크에서 데이터를 소비, 저장, 변환, 출력하는 전통적인 모놀리식 데이터 인프라와 달리 데이터 메시는 분산된 도메인별로 특화된 데이터 소비자를 지원합니다. 여기서 데이터는 도메인마다 ...