Cloud Data Lake

2장. Cloud의 빅 데이터 아키텍처

이 작품은 AI를 사용하여 번역되었습니다. 여러분의 피드백과 의견을 환영합니다: [e-mail]

빅 데이터는 더 많은 정보를 의미할 수도 있지만, 더 많은 잘못된 정보를 의미하기도 합니다.

나심 탈렙

1장에서 배운 것처럼, 이 장의 기초가 되는 Cloud 데이터 레이크에 대한 두 가지 핵심 사항이 있습니다:

• 데이터 레이크 접근 방식은 데이터의 소스, 크기 또는 구조에 관계없이 모든 유형의 데이터를 저장하고 처리하는 기능에서 시작되며, 이를 통해 조직은 다양한 값 밀도(즉, 신호 대 잡음비)를 가진 여러 이질적인 데이터 소스에서 높은 가치의 인사이트를 추출할 수 있습니다.

• Cloud에 데이터 레이크를 구축하려면 IaaS, PaaS, SaaS 솔루션의 다양한 구성 요소를 함께 조립하는 분리된 아키텍처가 필요합니다.

기억해야 할 중요한 점은 Cloud 데이터 레이크 솔루션을 구축하면 각각 고유한 강점을 가진 다양한 아키텍처 옵션이 제공된다는 것입니다. Future.com의 이 문서에서는 최신 데이터 아키텍처의 다양한 구성 요소에 대한 포괄적인 개요를 제공합니다. 이 장에서는 몇 가지 일반적인 아키텍처 패턴에 대해 자세히 살펴보고, 이러한 아키텍처가 무엇인지, 그리고 각 아키텍처가 Klodars Corporation이라는 가상의 조직에 적용되는 각 아키텍처의 강점을 이해해 보겠습니다.

Klodars Corporation이 Cloud로 이전하는 이유

Klodars Corporation은 태평양 북서부 지역에서 우비 및 기타 용품을 판매하는 번창하는 회사입니다. 비즈니스가 빠르게 성장함에 따라 다음과 같은 이유로 Cloud로 이전을 추진하고 있습니다:

• 온프레미스 시스템에서 실행되는 데이터베이스는 더 이상 비즈니스의 빠른 성장에 맞춰 확장할 수 없습니다.

• 비즈니스가 성장함에 따라 팀도 성장하고 있습니다. 영업팀과 마케팅팀 모두 시스템을 동시에 사용하는 사용자 수가 증가함에 따라 애플리케이션 속도가 훨씬 느려지고 때때로 시간 초과가 발생하는 것을 관찰하고 있습니다.

• 마케팅 부서에서는 소셜 미디어에서 캠페인을 가장 효과적으로 타겟팅할 수 있는 방법에 대해 더 많은 정보를 원하고 있으며 인플루언서를 활용하는 아이디어를 모색하고 있지만 어디서부터 어떻게 시작해야 할지 모르겠습니다.

• 영업 부서는 3개 주에 분산된 고객과의 업무를 빠르게 확장할 수 없기 때문에 우선적으로 관여할 소매 고객과 도매 유통업체의 우선 순위를 정하는 데 어려움을 겪고 있습니다.

• 투자자들은 비즈니스의 성장세에 반해 CEO에게 클로다르스가 방한용품 이상으로 확장할 수 있는 방법을 묻고 있습니다. CEO는 확장 전략을 수립해야 합니다.

소프트웨어 개발팀의 의욕적인 리더인 Alice는 다른 기업들이 겪고 있는 문제를 해결하기 위해 데이터 레이크 접근 방식을 어떻게 활용하고 있는지 살펴보고 클라우드를 조사해 보자는 아이디어를 Klodars Corporation의 CEO 겸 CTO에게 ...