Pular para o conteúdo
Even3

O desafio do pré-processamento na ciência de dados

Trecho de 1 min 33 s de Ciência de Dados e exploração do valor da informação em diversas áreas, gravado no evento Semana Nacional de Ciência e Tecnologia do IFMG - SNCT 2021.

Assistir à gravação completaNo Even3 Conteúdos · 2 h 3 min

Sobre este trecho

Descubra por que o pré-processamento e a integração de múltiplas fontes de dados consomem a maior parte do tempo de um cientista de dados.

Vai de a da gravação.

O que é dito neste trecho

Por exemplo, se a gente tá falando de muitos dados, a gente tá falando de a gente tem um problema sério que é o pré-processamento desse dado. Como que a gente vai organizar esses dados para jogar no aprendizado de máquina? E tem até um estudo que fala que 80% de um trabalho de um cientista dos dados é processando, organizando os dados para jogar no método, para analisar. E isso é a parte mais difícil, é 80% do tempo e às vezes também a pior parte também. E às vezes a gente se diverte muito mesmo assim, mas assim, 80% do tempo que a gente passa trabalhando às vezes é pré-processando. E o mais assim, um outro desafio do pré-processamento é se você tá lidando com dados de múltiplas fontes. Porque se você tá lidando com dados de múltiplas fontes, como você integra esses dados? Como você vai fazer o dado que você vai ter de um fármaco, de uma pessoa, integrar com tudo isso e ligar esses dados para você ter uma análise? Eu tenho até a gente até escrever um capítulo aí, eu a Michele do FMJ, a gente falou sobre isso, do desafio que é fazer isso um pouquinho do como, mas é muito difícil mesmo, tem várias técnicas. Então assim, essa parte do dado é muito importante e às vezes a gente não pensa tanto nele, mas é o mais importante mesmo. E depois também tem a parte da privacidade, né, que lógico a gente vai ter que liberar ou não esses dados, etc. Então tem todos esses desafios no meio de campo que a gente tem que tratar para a gente conseguir fazer uma coisa tão divertida igual essa. Então tem esse desafio super divertido.

Outros trechos deste conteúdo