Arquitetar plataformas de dados e de aprendizagem automática
by Marco Tranquillin, Valliappa Lakshmanan, Firat Tekiner
Capítulo 4. Um quadro de migração
Este trabalho foi traduzido com recurso a IA. Agradecemos o teu feedback e comentários: translation-feedback@oreilly.com
A menos que estejas numa startup, é raro construíres uma plataforma de dados de raiz. Em vez disso, cria uma nova plataforma de dados migrando para ela elementos de sistemas antigos. Neste capítulo, vamos examinar o processo de migração- todas as coisas que deves fazer quando fazes a tua viagem para uma nova plataforma de dados. Começaremos por apresentar um modelo concetual e uma possível estrutura que deve seguir ao modernizar a plataforma de dados. Em seguida, analisaremos como uma organização pode estimar o custo geral da solução. Discutiremos como garantir que a segurança e a governança de dados estejam em vigor mesmo durante a migração. Por fim, discutiremos a migração de esquemas, dados e pipelines. Aprenderá também sobre as opções de capacidade regional, Network+ e restrições de transferência de dados.
Moderniza os fluxos de trabalho de dados
Antes de começares a criar um plano de migração, deves ter uma visão abrangente da razão pela qual o estás a fazer e para onde estás a migrar.
Visão holística
A transformação da modernização dos dados deve ser considerada de forma holística. Olhando para esta questão de uma perspetiva panorâmica, podemos identificar três pilares principais:
- Resultados comerciais
-
Concentra-te nos fluxos de trabalho que estás a modernizar e identifica os resultados comerciais que esses fluxos de ...