Pular para o conteúdo
Even3

Palestra

Big Data e Inteligência Artificial na nuvem

Gravado no evento Semana Nacional de Ciência e Tecnologia do IFMG - SNCT 2020 · 1 h 20 min de gravação

Trechos em vídeo

Sobre o conteúdo

O vídeo apresenta a palestra "Big Data e Inteligência Artificial na nuvem", inserida na programação da Semana Nacional de Ciência e Tecnologia no IFMG Campus Ribeirão das Neves, no contexto da atividade Experimentações cênicas e podcasting em plataformas digitais. O professor Moisés Pereira realiza a abertura do evento e apresenta o palestrante Pedro Kássio Ribeiro Matos Loureiro de Carvalho, destacando sua formação acadêmica no CEFET-MG e sua experiência profissional em engenharia e ciência de dados no mercado.

O que é abordado

  1. Abertura e apresentação do palestrante
  2. Sumário e os 5 Vs do Big Data
  3. Internet das Coisas (IoT) e fontes geradoras de dados
  4. Exemplos de aplicações: Finanças, bioinformática e smart grids
  5. Pipeline de Big Data e Arquitetura LambdaTrecho de 1 min 58 s
  6. Arquitetura Lambda com ferramentas Open Source
  7. Arquiteturas em Nuvem: Google Cloud Platform e AWS
  8. Comparativo de ferramentas: Ingestão, processamento e serving
  9. Machine Learning e Inteligência Artificial na Nuvem
  10. Perguntas, respostas e encerramentoTrecho de 1 min 44 sTrecho de 1 min 23 s

Dúvidas que o conteúdo responde

Quais são os 5 Vs do Big Data destacados na palestra?

Os pilares conceituais abordados são Volume (grande escala dos dados), Velocidade (rapidez com que os dados chegam e são gerados), Variedade (diferentes tipos e formatos como JSON, CSV e texto), Veracidade (confiabilidade e certeza dos dados) e Valor (capacidade de entregar resultados úteis e aplicáveis ao negócio).

Como funciona a Arquitetura Lambda no ecossistema de Big Data?

A Arquitetura Lambda divide o tratamento de dados em três componentes principais: a Batch Layer, que processa grandes volumes históricos de dados em lote; a Speed Layer, voltada para processamento de novos dados em tempo real ou streaming; e a Serving Layer, que unifica os resultados de ambas as camadas para permitir consultas rápidas e visualização em dashboards.

Em qual camada da Arquitetura Lambda os modelos de Machine Learning costumam ser treinados?

Na abordagem tradicional, o treinamento, validação e teste dos modelos ocorrem na Batch Layer, onde se encontram grandes blocos de dados históricos. Já na Speed Layer, costuma-se carregar o modelo pré-treinado para efetuar inferências ou predições em tempo real nos dados que chegam, com exceção de modelos específicos de aprendizado incremental.

Quando é indicado utilizar bancos de dados relacionais versus NoSQL em Big Data?

Bancos relacionais funcionam bem até um certo patamar volumétrico, mas em cenários de Big Data com bilhões de registros consultas complexas e junções tornam-se proibitivas. Por isso, utilizam-se frequentemente tecnologias NoSQL para escalabilidade e desempenho, embora estejam surgindo soluções relacionais horizontalmente escaláveis como o Google Cloud Spanner.

O que é recomendado estudar para iniciar na carreira de Ciência de Dados?

Recomenda-se forte base em estatística e probabilidade, estudo dos modelos de Machine Learning e seus parâmetros, além de técnicas aprofundadas de limpeza, transformação e engenharia de features, visto que cerca de 80% do esforço do profissional consiste em preparar e tratar os dados antes de aplicar os algoritmos.

Assuntos

  • Big Data
  • Inteligência Artificial
  • Arquitetura Lambda
  • Google Cloud Platform
  • AWS
  • Machine Learning
  • Internet das Coisas
  • Ciência de Dados

Palestrantes

  • Pedro Kássio Ribeiro Matos Loureiro de Carvalho

    Palestrante

    Mestre em Modelagem Matemática Computacional e Engenheiro de Computação pelo Centro Federal de Educação Tecnológica de Minas Gerais. Aluno de Doutorado em Modelagem Matemática Computacional do CEFET-MG. Professor no curso de Ciência de Dados e Big Data na Pontifícia Universidade Católica de Minas Gerais e professor contratado do Instituto Metodista Izabela Hendrix. Atualmente trabalha como Cientista de Dados na Localiza.

Outros conteúdos deste evento

Gravados no evento Semana Nacional de Ciência e Tecnologia do IFMG - SNCT 2020

Palestra · 47 min

Mapeamento urbano com uso de drone

Gravado no evento Semana Nacional de Ciência e Tecnologia do IFMG - SNCT 2020

A palestra aborda o uso de drones para mapeamento em áreas urbanas, tendo como estudo de caso o levantamento piloto no IFMG Campus Santa Luzia e seu entorno. São explicados os…

Ver resumo e capítulos