book

Trino: O Guia Definitivo, 2ª Edição

by Matt Fuller, Manfred Moser, Martin Traverso

April 2025

Intermediate to advanced

322 pages

8h 37m

Portuguese (Portugal, Brazil)

O'Reilly Media, Inc.

Book available

Read now

Unlock full access

Convenções utilizadas neste livroExemplos de código, permissões e atribuiçãoAprendizagem em linha da O'ReillyComo contactar-nosAgradecimentos
Os problemas com o Big DataTrino para o salvamentoConcebido para desempenho e escalaSQL em qualquer coisaSeparação do armazenamento de dados e dos recursos de computação de consultaCasos de utilização do TrinoUm ponto de acesso de análise SQLPonto de acesso ao Data Warehouse e aos sistemas de origemFornece acesso baseado em SQL a qualquer coisaConsultas federadasCamada semântica para um armazém de dados virtualMotor de consulta do lago de dadosConversões SQL e ETLMelhores informações devido a tempos de resposta mais rápidosBig Data, aprendizagem automática e inteligência artificialOutros casos de utilizaçãoRecursos TrinoSítio WebDocumentaçãoConversa com a comunidadeCódigo-fonte, licença e versãoContribuiRepositório de livrosConjunto de dados da írisConjunto de dados de vooUma breve história de TrinoConclusão
Experimenta o Trino com o Docker ContainerInstalar a partir do ficheiro de arquivoMáquina virtual JavaPythonInstalaçãoConfiguraçãoAdicionar uma fonte de dadosExecuta o TrinoConclusão
Interface de linha de comando do TrinoComeçar a trabalharPaginaçãoHistória e conclusãoDiagnósticos adicionaisExecução de consultasFormatos de saídaIgnorar errosDriver JDBC do TrinoDescarregar e registar o controladorEstabelecer uma ligação a TrinoTrino e ODBCBibliotecas de clientesTrino Web UISQL com TrinoConceitosPrimeiros exemplosConclusão
Coordenador e Trabalhadores de um ClusterCoordenadorServiço de descobertaTrabalhadoresArquitetura baseada em conectoresCatálogos, esquemas e tabelasModelo de execução de consultasPlaneamento de consultasAnalisar e analisarPlaneamento inicial da consultaRegras de otimizaçãoEmpurrar predicadoEliminação de junções cruzadasTopNAgregações parciaisRegras de aplicaçãoDecorrelação da união lateralDecorrelação Semi-Junta (IN)Optimizador baseado nos custosO conceito de custoCusto da adesãoEstatísticas do quadroFiltrar estatísticasEstatísticas de tabela para tabelas particionadasJunta a EnumeraçãoUniões de difusão versus distribuídasTrabalhando com estatísticas de tabelaTrino ANALYZERecolha de estatísticas ao gravar em discoAnalisa a colmeiaExibir estatísticas de tabelaConclusão
Detalhes da configuraçãoConfiguração do servidorRegistoConfiguração de nósConfiguração da JVMLançadorInstalação do clusterInstalação RPMEstrutura do diretório de instalaçãoConfiguraçãoDesinstalar o TrinoInstalação na CloudGráfico Helm para implantação de KubernetesConsiderações sobre o dimensionamento do clusterConclusão
ConfiguraçãoExemplo de conetor RDBMS: PostgreSQLConsulta pushdownParalelismo e concorrênciaOutros conectores RDBMSSegurançaPassagem de consultaConectores Trino TPC-H e TPC-DSConector Hive para fontes de dados de armazenamento distribuídoApache Hadoop e HiveConector HiveFormato de tabela em forma de colmeiaTabelas geridas e externasDados particionadosCarregamento de dadosFormatos de ficheiros e compressãoExemplo de MinIOGestão e análise de armazenamento distribuído modernoFontes de dados não relacionaisConector JMX do TrinoConector de buraco negroConector de memóriaOutros conectoresConclusão

Conectando ao HBase com o PhoenixExemplo de conetor de armazenamento de valores chave: AcumuloUtilizar o conetor Trino AccumuloEmpurrar predicado na AccumuloConector Apache CassandraExemplo de conetor de sistema de streaming: KafkaExemplo de conetor de armazenamento de documentos: ElasticsearchVisão geralConfiguração e utilizaçãoProcessamento de consultasPesquisa de texto completoResumoConsulta a Federação em TrinoExtrair, Transformar, Carregar e Consultas FederadasConclusão
Declarações de TrinoTabelas Trino SystemCatálogosEsquemasEsquema de informaçãoTabelasPropriedades de tabelas e colunasCópia de uma tabela existenteCriar uma nova tabela a partir dos resultados da consultaModificar uma tabelaEliminar uma tabelaTabela Limitações dos conectoresVisualizaçõesInformações e configuração da sessãoTipos de dadosTipos de dados de recolhaTipos de dados temporaisTipo FundiçãoNoções básicas da instrução SELECTCláusula WHERECláusulas GROUP BY e HAVINGCláusulas ORDER BY e LIMITJunta as declaraçõesCláusulas UNION, INTERSECT e EXCEPTAgrupamento de operaçõesCom cláusulaSubconsultasSubconsulta escalarEXISTS SubquerySubconsulta quantificadaEliminar dados de uma tabelaConclusão
Funções e operadores IntroduçãoFunções e operadores escalaresOperadores booleanosOperadores lógicosSeleção de intervalo com a instrução BETWEENDeteção de valores com IS (NOT) NULLFunções e operadores matemáticosFunções trigonométricasFunções constantes e aleatóriasFunções e operadores de cadeia de caracteresCordas e mapasUnicodeExpressões regularesAninhamento de tipos de dados complexosFunções JSONFunções e operadores de data e horaHistogramasFunções agregadasFunções agregadas do mapaFunções agregadas aproximadasFunções do WindowsExpressões LambdaFunções geoespaciaisDeclarações preparadasConclusão
AutenticaçãoPalavra-passe e autenticação LDAPOutros tipos de autenticaçãoAutorizaçãoControlo de acesso ao sistemaControlo de acesso ao conetorEncriptaçãoEncriptação da comunicação Trino Cliente-CoordenadorCriar Java Keystores e Java TruststoresEncriptação da comunicação dentro do cluster TrinoAutoridade de certificação versus certificados auto-assinadosAutenticação de certificadosKerberosPré-requisitosAutenticação de cliente KerberosAcesso e configuração de fontes de dados para segurançaAutenticação Kerberos com o Conector HiveAutenticação do serviço Hive MetastoreAutenticação HDFSSeparação de clustersConclusão
Consultas, visualizações e muito mais com o Apache SupersetMelhorias de desempenho com RubiXFluxos de trabalho com o Apache AirflowExemplo de trino incorporado: Amazon AthenaDistribuições comerciais convenientes: Starburst Enterprise e Starburst GalaxyOutros exemplos de integraçãoIntegrações personalizadasConclusão
Monitorização com o Trino Web UIDetalhes do nível de clusterLista de consultasVer detalhes da consultaAjustar as consultas SQL do TrinoGestão da memóriaConcorrência de tarefasProgramação dos trabalhadoresTroca de dados em redeConcorrênciaTamanhos de bufferAjustar a máquina virtual JavaGrupos de recursosDefinição do grupo de recursosPolítica de programaçãoDefinição das regras do seletorConclusão
Plataformas de implementação e de tempo de execuçãoDimensionamento do clusterCaso de utilização de migração Hadoop/HiveOutras fontes de dadosUtilizadores e tráfegoConclusão

Content preview from Trino: O Guia Definitivo, 2ª Edição

Parte II. Mergulha mais fundo no Trino

Depois de aprenderes sobre o Trino e os vários casos de utilização, de o instalares e de começares a utilizá-lo, estás agora pronto para te aprofundares e saberes mais.

Nesta segunda parte do livro, aprende sobre o funcionamento interno do Trino em preparação para o instalar para utilização em produção, executá-lo, afinar a configuração e muito mais.

Nos capítulos seguintes, discutimos pormenores sobre a ligação de fontes de dados e a sua consulta com o suporte do Trino para instruções SQL, operadores, funções e muito mais.