Até este ponto, os estágios do ciclo de vida da engenharia de dados foram principalmente sobre a passagem de dados de um lugar para outro ou seu armazenamento. Neste capítulo, aprenderás como tornar os dados úteis. Ao compreender as consultas, a modelagem e as transformações (consulte a Figura 8-1), terás as ferramentas para transformar ingredientes de dados brutos em algo consumível pelas partes interessadas a jusante.
Figura 8-1. As transformações permitem-nos criar valor a partir dos dados
Em primeiro lugar, abordaremos as consultas e os padrões significativos que lhes estão subjacentes. Em segundo lugar, analisaremos os principais padrões de modelação de dados que podes utilizar para introduzir a lógica empresarial nos teus dados. Em seguida, abordaremos as transformações, que pegam na lógica dos teus modelos de dados e nos resultados das consultas e tornam-nos úteis para um consumo mais direto a jusante. Por fim, abordaremos com quem vais trabalhar e as tendências relacionadas com este capítulo.
Uma variedade de técnicas pode ser usada para consultar, modelar e transformar dados em bancos de dados SQL e NoSQL. Esta seção se concentra em consultas feitas a um sistema OLAP, como um data warehouse ou data lake. ...
Become an O’Reilly member and get unlimited access to this title plus top books and audiobooks from O’Reilly and nearly 200 top publishers, thousands of courses curated by job role, 150+ live events each month, and much more.
