Pular para o conteúdo
Even3

Como funciona a vetorização de palavras para redes neurais

Trecho de 2 min 1 s de Construção de Chatbots com Inteligência Artificial, gravado no evento Semana Nacional de Ciência e Tecnologia do IFMG - SNCT 2020.

Assistir à gravação completaNo Even3 Conteúdos · 55 min

Sobre este trecho

Entenda a técnica de conversão de texto em vetores numéricos de zeros e uns para que redes neurais consigam processar linguagem.

Vai de a da gravação.

O que é dito neste trecho

E aí você cria, no caso do desse desse chatbot, ele funciona assim. Ele pega eh o maior o maior a maior frase que tem e cria um vetor desse tamanho. Então, sei lá, minha minha meu maior tipo aqui, né? Esse aqui, ó. Eu estou leyendo Gabriela, cravo e canela. Quer dizer, daqui ele conta, inclusive os espaços, quantos eh qual que é o tamanho e gera um vetor com esse tamanho. Então imagina que ele gerou um vetor de 50 posições, por exemplo. Aí baseado nessas 50 posições, ele vai olhando as outras palavras, as outras frases, que na verdade já virou palavras, né? Ele quebrou isso, lembra? Ele quebrou isso. Então ele pega a palavra, no vetor ele vê qual posição que tem a palavra. Por exemplo, livro. Para esse primeiro para essa primeira frase, onde que tem a palavra livro? Ah, tem na posição 50. Indicar. Tá na posição 20. E isso com isso ele gera os números, que é esses números aqui, ó, tudo baseado em zero e um. Ou seja, um tem a palavra, zero não tem a palavra no vetor. Aqui, ó, tem esse monte de de monte não, né? Na verdade só tem três três pontinhos no meio aqui, mas na verdade é porque aqui tá eh tá eh como se não fosse expandido, né? É o contrário de expandido, ele tá eh conciso, né? Ele não não tá mostrando tudo, porque na verdade esse vetor é gigantesco, tá? Não é só esse tiquetinho aqui, não. Não é só esse pouquinho, não. Mas só para ter uma ideia, por exemplo, aqui, ó, aqui não tem na primeira posição não tem, na segunda posição aqui, ó, tem um tem uma palavra. Aí ele colocou um, tá vendo? Na terceira não tem. Assim que ele monta que ele monta esses vetores. Cada vetor corresponde a uma palavra dessa aqui, a uma frase dessa aqui, ó. Tá bom?

Outros trechos deste conteúdo