Databricks의 Unity Catalog를 통한 데이터 거버넌스

11장. Unity 카탈로그 도입 가속화하기

이 작품은 AI를 사용하여 번역되었습니다. 여러분의 피드백과 의견을 환영합니다: [e-mail]

Unity Catalog는 조직이 데이터브릭스 내에서 데이터 및 AI 거버넌스를 관리하는 방식을 혁신합니다. 이 시스템은 데이터 거버넌스 전략의 근본적인 변화를 나타내며, 메타데이터 관리에 대한 혁신적인 접근 방식을 도입하여 사용자에게 데이터 및 AI 자산에 대한 탁월한 제어와 가시성을 제공합니다. 이제 조직은 민첩성이나 성능의 저하 없이 엔터프라이즈급 거버넌스를 구현할 수 있습니다.

데이터브릭스 플랫폼의 얼리 어답터의 경우, 기존 HMS 기반 워크스페이스를 새로운 Unity 카탈로그 기반 아키텍처로 마이그레이션하는 과정을 거쳐야 합니다. 신중한 계획이 필요하지만, 이러한 전환을 통해 이전에는 사용할 수 없었던 중요한 거버넌스 기능과 향상된 보안 기능을 활용할 수 있습니다.

반대로 데이터브릭스에서 새로운 솔루션을 구축하는 조직은 더욱 간소화된 경험을 누릴 수 있습니다. 이러한 사용자는 도입을 복잡하게 만들 수 있는 레거시 구성이나 기술 부채 없이 처음부터 Unity 카탈로그를 구현할 수 있습니다. 이제 모든 새 워크스페이스의 기본 카탈로그로 Unity Catalog를 설정하는 Databricks를 통해 이러한 사용자는 첫날부터 동급 최고의 거버넌스 툴의 이점을 누릴 수 있습니다.

새로운 워크스페이스에서 HMS를 단계적으로 폐지하는 것은 전략적 거버넌스 솔루션으로서 Unity Catalog에 대한 Databricks의 의지를 보여줍니다. 이러한 진화를 통해 세 가지 뚜렷한 채택 패턴이 만들어졌습니다:

얼리어답터

이미 Unity Catalog로의 전환을 완료하고 모든 기능을 활용하고 있는 조직

마이그레이션 사용자

현재 거버넌스 개선 사항과 기존 워크로드의 균형을 맞추면서 HMS에서 Unity Catalog로 전환하는 여정을 탐색 중인 팀

Unity 카탈로그 네이티브 사용자

Unity Catalog를 기본 카탈로그 시스템으로 사용하여 새롭게 시작하는 신규 Databricks 고객

각 그룹은 거버넌스 여정에서 고유한 과제와 기회에 직면해 있습니다. 이러한 다양한 관점을 이해하는 것은 데이터 워크플로우의 중단을 최소화하면서 Unity Catalog의 가치를 극대화하고자 하는 조직에게 필수적입니다.

이 장에서는 마이그레이션 및 도입과 관련된 몇 가지 주요 주제를 다루어 특정 Databricks 도입 단계에 따라 Unity Catalog를 효과적으로 활용할 수 있도록 도와드립니다. 이제 모든 새 워크스페이스에 Unity Catalog를 기본 카탈로그로 프로비저닝하여 데이터 환경과 상호 작용하는 방식을 즉시 혁신할 수 있습니다. 이 아키텍처의 강력한 특징을 살펴보고 기존 HMS 기본 환경과 어떻게 다른지 알아보겠습니다. 데이터 관리 전략, 보안 태세, 거버넌스 기능에 미치는 중요한 영향에 대한 인사이트를 얻을 수 있습니다.

대부분의 데이터브릭스 사용자는 HMS ...