Capítulo 7. Limpeza e preparação dos dados
Este trabalho foi traduzido com recurso a IA. Agradecemos o teu feedback e comentários: translation-feedback@oreilly.com
Durante a análise e modelação de dados, gasta uma quantidade significativa de tempo na preparação de dados: carregamento, limpeza, transformação e reorganização. Estas tarefas ocupam frequentemente 80% ou mais do tempo de um analista. Por vezes, a forma como os dados são armazenados em ficheiros ou bases de dados não é a mais adequada para uma determinada tarefa. Muitos pesquisadores optam por fazer o processamento ad hoc de dados de um formato para outro usando uma linguagem de programação de uso geral, como Python, Perl, R, ou Java, ou ferramentas de processamento de texto Unix como sed ou awk. Felizmente, o pandas, juntamente com as caraterísticas da linguagem Python, fornece-te um conjunto de ferramentas de alto nível, flexíveis e rápidas que te permitem manipular os dados para a forma correta.
Se identificares um tipo de manipulação de dados que não se encontra neste livro ou noutro local da biblioteca pandas, sente-te à vontade para partilhar o teu caso de utilização numa das listas de discussão Python ou no site GitHub do pandas. De facto, grande parte do design e da implementação do pandas foram impulsionados pelas necessidades das aplicações do mundo real.
Neste capítulo, discuto ferramentas para dados em falta, dados duplicados, manipulação de cadeias de caracteres e algumas outras transformações analíticas de ...
Become an O’Reilly member and get unlimited access to this title plus top books and audiobooks from O’Reilly and nearly 200 top publishers, thousands of courses curated by job role, 150+ live events each month,
and much more.
Read now
Unlock full access