October 2025
Beginner to intermediate
290 pages
4h 16m
Korean
book
Apache Hudi: The Definitive Guide
by Shiyan Xu, Prashant Wason, Bhavani Sudha Saktheeswaran, Rebecca Bilbro
Content preview from Apache Hudi: The Definitive Guide
Become an O’Reilly member and get unlimited access to this title plus top books and audiobooks from O’Reilly and nearly 200 top publishers, thousands of courses curated by job role, 150+ live events each month,
Start your free trial
챕터 4. Hudi에서 읽기
이 작품은 AI를 사용하여 번역되었습니다. 여러분의 피드백과 의견을 환영합니다: translation-feedback@oreilly.com
데이터를 효율적으로 읽고 쿼리하는 기능은 모든 데이터 레이크하우스의 궁극적인 목적이며, 분석과 머신 러닝의 속도와 유연성에 직접적인 영향을 미칩니다. 따라서 성능과 안정성이 뛰어난 데이터 플랫폼을 구축하려면 Hudi의 읽기 측 기능과 다양한 쿼리 엔진과의 통합 방식에 대한 깊은 이해가 가장 중요합니다. 2장에서 살펴본 테이블 레이아웃의 기본 개념과 3장에서 살펴본 쓰기 작업을 기반으로, 이 장에서는 기술 심층 분석과 실제 예제를 결합하여 Apache Hudi에서 데이터를 읽기 위한 최종 가이드 역할을 합니다.
이 장은 Hudi의 읽기 기능에 대한 포괄적인 탐색을 제공하기 위해 세 개의 섹션으로 구성되어 있습니다. '쿼리 엔진과 통합하기 '에서는 널리 사용되는 쿼리 엔진이 Hudi와 상호 작용하는 방법을 설명합니다. Hudi 읽기 흐름을 소개하고, Hudi 테이블의 원활하고 효율적인 쿼리를 위한 통합 메커니즘에 대해 논의하며, 이 과정에서 데이터 카탈로그의 역할을 살펴봅니다.
'쿼리 유형 살펴보기'에서는 실제 적용에 대한 논의를 뒷받침하기 위해 예제를 통해 Hudi의 다양한 읽기 기능을 소개합니다. 다양한 쿼리 유형을 살펴보고 다양한 분석 과제를 해결할 수 있는 관련 동작 및 구성 옵션에 대해 논의합니다.
고급 데이터 레이크하우스 패턴을 위해 설계된 몇 가지 중요한 기능을 통해 Hudi의 읽기 작업의 유연성과 성능이 향상됩니다. '주목할 만한 기능 강조'에서는 이러한 더 많은 관련 기능과 설계를 살펴봅니다.
이 장을 완료하면 Hudi에서 데이터를 효과적으로 읽을 수 있게 됩니다. 읽기 흐름을 명확하게 이해하고, 다양한 시나리오에 다양한 쿼리 유형을 적용하는 방법을 배우며, 고급 기능을 사용하여 다운스트림 애플리케이션을 위한 효율적이고 안정적인 데이터 플랫폼을 설계하는 방법을 알게 될 것입니다.
쿼리 엔진과 통합하기
데이터 레이크하우스 아키텍처에서 쿼리 엔진은 레이크하우스에 저장된 데이터에 대한 사용자 쿼리를 처리하는 컴퓨팅 파워하우스입니다. 데이터의 마스터 사서라고 생각하면 됩니다. 일반적으로 SQL로 표현되는 사용자의 요청을 해석하고 스토리지 계층의 방대한 아카이브(예: Amazon S3, GCS 또는 HDFS)에서 필요한 정확한 정보를 효율적으로 검색합니다. Apache Spark, Presto, Trino와 같은 엔진은 테이블에서 데이터를 읽고, 처리하고, 반환하는 API와 분산 ...