Apache Polaris: The Definitive Guide

머리말

이 작품은 AI를 사용하여 번역되었습니다. 여러분의 피드백과 의견을 환영합니다: [e-mail]

Apache Polaris에 오신 것을 환영합니다 : 최종 가이드에 오신 것을 환영합니다. 이 책은 혁신적인 커뮤니티 중심 카탈로그 프로젝트인 Apache Polaris™를통해 확장 가능하고 안전하며 유연한 데이터 레이크하우스를 구축하고 관리하는 여정을 안내하기 위해 만들어졌습니다. 데이터 레이크하우스가 계속 진화함에 따라, Polaris는 차세대 카탈로그 솔루션으로 통합 데이터 관리, 역할 기반 액세스 제어, 다중 카탈로그 지원을 제공하는 동시에 Cloud 및 온프레미스 환경 전반에서 개방형 표준과 상호 운용성을 촉진합니다.

이 책은 데이터 레이크하우스 아키텍처와 데이터 레이크하우스의 성능, 안정성, 접근성을 높이는 데 있어 Apache Iceberg™가수행하는 중요한 역할에 대한 이야기부터 시작합니다. 이 책의 첫 번째 부분에서는 데이터 레이크하우스의 기원과 아키텍처에 대해 자세히 알아보고, 데이터 레이크하우스가 해결하도록 설계된 과제를 살펴보고, 최신 데이터 레이크에 Apache Iceberg가 제공하는 기능에 대해 살펴봅니다. 데이터가 비즈니스 운영의 모든 측면에서 점점 더 중심이 되면서, Iceberg의 강력한 테이블 형식은 대규모 데이터 관리를 위한 필수 도구로 부상했으며, ACID 트랜잭션, 스키마 진화, 효율적인 쿼리와 같은 필수 기능을 제공합니다. 또한, 이 테이블 형식에 생명을 불어넣어 데이터 레이크하우스의 접근성과 일관성을 높이기 위해 원래 Iceberg 카탈로그가 어떻게 개발되었는지도 살펴볼 것입니다.

참고

Apache Polaris는 Apache 인큐베이터의 후원을 받아 ASF(Apache Software Foundation)에서 인큐베이션 중인 프로젝트입니다. 추가 검토를 통해 인프라, 커뮤니케이션 및 의사 결정 프로세스가 다른 성공적인 ASF 프로젝트와 일치하는 방식으로 안정화되었다고 판단될 때까지 새로 접수된 모든 프로젝트에 대해 인큐베이션이 필요합니다. 인큐베이션 상태가 반드시 코드의 완성도나 안정성을 반영하는 것은 아니지만, 프로젝트가 아직 ASF에 의해 완전히 승인되지 않았음을 나타냅니다.

그러나 Iceberg의 강력한 기능에도 불구하고 새로운 세대의 카탈로그에 대한 필요성은 더욱 분명해졌습니다. 2장에서는 다양한 Iceberg 카탈로그의 세계를 소개하고, 고유한 장점과 여러 카탈로그 옵션이 있을 때 발생하는 문제점을 강조합니다. 파일 기반 카탈로그부터 서비스 중심 솔루션까지, 각 카탈로그가 고유한 기능을 제공하지만 특히 다양한 환경과 데이터 도구에 배포될 때 어떻게 복잡성을 초래하는지 살펴봅니다. 이에 따라 카탈로그 구현 전반에서 클라이언트 상호 작용을 간소화하여 언어 간 지원과 관리형 서비스와의 통합을 보다 간단하고 일관성 있게 만들기 위해 개발된 Apache Iceberg REST 카탈로그 사양을 사용하게 되었습니다.

Polaris의 기반은 이 REST 사양을 ...