Databricks의 Unity Catalog를 통한 데이터 거버넌스

프롤로그 선택에 의한 거버넌스

이 작품은 AI를 사용하여 번역되었습니다. 여러분의 피드백과 의견을 환영합니다: [e-mail]

데이터는 유용합니다. 잘 이해되고 감사할 수 있는 고품질의 데이터는 귀중합니다.

테드 프리드먼, 가트너

이 책에서 예시로 사용할 가상의 회사( )인 넥사 부티크는 2015년에 미국에 본사를 둔 온라인 패션 소매업계의 스타트업으로 설립되었습니다. 넥사 부티크는 친환경 의류 및 액세서리의 디자인, 생산, 판매를 통해 지속 가능한 패션 관행을 장려하는 데 전념하고 있습니다. 소매업에 혁명을 일으키겠다는 대담한 비전을 가진 Nexa Boutique는 데이터 기반 인사이트의 힘을 활용하기 시작했습니다. 데이터 레이크 아키텍처의 인기가 높아지면서 비즈니스 의사 결정과 투자를 지원하기 위해 이를 활용했고, 이를 통해 데이터 분석을 기반으로 한 업계 혁신의 선두에 서게 되었습니다. 여정의 초기 단계에서 넥사 부티크는 데이터 레이크 플랫폼에 집중적으로 투자하는 전략적 결정을 내렸습니다. 이는 예측 분석을 활용하여 공급망을 최적화하고 시장 동향과 고객 행동을 예측함으로써 성장을 가속화하는 촉매제가 되었습니다.

정의: 넥사 부티크

차세대 혁신을 의미하는 'Nexa'와 전문 상점을 뜻하는 프랑스어 '부티크'를 결합한 이름인 Nexa Boutique는 이 책 전체에서 언급하는 가상의 사례로, Unity Catalog를 구현하여 데이터 민주화에 큰 성공을 거둔 기업의 예시입니다. 내부 업무와 데이터 여정에 대한 모든 설명은 전적으로 허구이며 실제 사건이나 회사를 대표하지 않습니다.

정의: 데이터 레이크

데이터 레이크는 대량의 데이터를 원시 형식으로 보관하는 중앙 위치( )를 말합니다. 파일이나 폴더에 데이터를 저장하는 계층형 데이터 웨어하우스와 비교하여, 데이터 레이크는 플랫 아키텍처와 오브젝트 스토리지를 사용하여 데이터를 저장합니다.‍

넥사의 폭발적인 성장에 힘입어 넥사는 영국과 유럽으로 사업을 확장하는 등 새로운 시장으로 진출했습니다. 4년 만에 넥사는 전 세계 40개국에 진출했습니다. 이러한 성장으로 인해 여러 도구와 애플리케이션이 사일로에 배포되고 관리되는 매우 복잡한 데이터 플랫폼이 탄생했습니다. 데이터 팀은 데이터 부하 증가에 대처하고 여러 지역의 다양한 규제 요건을 충족하는 데 있어 엄청난 어려움에 직면했습니다. 유럽연합(EU) 고객의 경우 데이터 수집, 저장 및 처리에 엄격한 규정을 적용하는 일반 데이터 보호 규정(GDPR)을 준수해야 했습니다. 미국 내 고객의 경우 캘리포니아 주민에게 개인정보 사용처를 알 권리, 해당 정보를 임의로 삭제할 권리, 개인정보 판매를 거부할 권리 등 개인정보에 대한 새로운 권리를 부여하는 캘리포니아 소비자 개인정보 보호법(CCPA) 및 유사 법률을 준수해야 했습니다.

전자상거래 영역에서 고객의 신용카드 정보를 취급하는 소매업체로서 Nexa는 또한 결제 카드 데이터를 포함한 민감한 데이터의 안전한 처리, 저장, 전송을 규정하는 전 세계적으로 인정받는 ...