Utilização do modelo skip-gram para representação distribuída de palavras no projeto Media Cloud Brasil

Resumo

Existe um problema de representação em processamento de linguagem natural, pois uma vez que o modelo tradicional de bag-of-words representa os documentos e as palavras em uma unica matriz, esta tende a ser completamente esparsa. Para lidar com este problema, surgiram alguns métodos que são capazes de representar as palavras utilizando uma representação distribuída, em um espaço de dimensão menor e mais compacto, inclusive tendo a propriedade de relacionar palavras de forma semântica. Este trabalho tem como objetivo utilizar um conjunto de documentos obtido através do projeto Media Cloud Brasil para aplicar o modelo skip-gram em busca de explorar relações e encontrar padrões que facilitem na compreensão do conteúdo.

Ficha do documento

Tipo

Dissertação

Ano

2015

Instituição

Fundação Getulio Vargas

Fonte

Repositório da FGV

Idioma

Português

Acesso

Não informado

Identificador

oai:repositorio.fgv.br:10438/16685

Palavras-chave

Natural language processingNeural networksSkip-gramMedia Cloud BrasilProcessamento de linguagem naturalRedes neuraisMatemáticaProcessamento da linguagem natural (Computação)Redes neurais (Computação)