Modelagem de tópicos e interpretabilidadeuma proposta de visualização de resultados implementada em D3.js
Barata Ribeiro, Marcelo Bianchi
O documento é disponibilizado pela fonte de origem, que mantém a versão integral e as condições de uso.
Resumo
Nos últimos anos, diversos avanços foram promovidos no campo de modelagem de tópicos, seja por meio do desenvolvimento de novos algoritmos, seja em processos de avaliação, assim como pelo surgimento de novas ferramentas de visualização. Esta última frente avança devido à percepção de que modelos de tópicos fornecem nova capacidade exploratória de grandes coleções de documentos, o que, aliado a soluções de visualização, pode trazer nova percepção analítica ao especialista de domínio. Este trabalho buscou introduzir uma solução interativa e de alta amplitude analítica, tendo como objeto de estudo uma coleção de documentos disponibilizada pela FGV/CPDOC. A metodologia envolveu uso de resultados provenientes de modelagem de tópicos e transformações dos dados para o processo de visualização, o que demandou o uso de distintas ferramentas de programação disponíveis. Após investigação do estado da arte, a hipótese principal é que haveria baixa disponibilidade de ferramentas de visualização de tópicos que incorporassem uma visão global do corpus acompanhada por um aumento gradual do nível de detalhamento, passando pela análise de agrupamentos de objetos viabilizada pela modelagem de tópicos, até a exploração de cada objeto. A principal contribuição está na conceituação de uma nova ferramenta que atende a conceitos de granularidade, usuário-alvo e data-ink ratio por meio de uma linguagem de programação que forneça o máximo de flexibilidade. Por fim, conclui-se que haveria muito espaço de melhoria, seja por meio de aumento de interatividade, quanto por maior dedicação a etapas de pré-processamento no caso de coleções de documentos que tenham passado por processo de OCR.
Ficha do documento
- Tipo
- Dissertação
- Ano
- 2020
- Instituição
- Fundação Getulio Vargas
- Fonte
- Repositório da FGV
- Idioma
- Português
- Acesso
- Não informado
- Identificador
- oai:repositorio.fgv.br:10438/29548
- Palavras-chave
- Aprendizado de máquinaMineração de dadosProcessamento de linguagem naturalVisualização da informaçãoModelagem de tópicosTopic modelingVisualizationText DataMatemáticaAprendizado do computadorMineração de dados (Computação)Processamento da linguagem natural (Computação)Modelagem de dados
Conteúdos relacionados
- DissertaçãoLevantamento de indicadores através de data mining, Latent Dirichlet Allocation e TF-IDFFundação Getulio Vargas · 2020
- DissertaçãoVisualização em multirresolução do fluxo de tópicos em coleções de textoFundação Getulio Vargas · 2014
- DissertaçãoUsing supervised machine learning and sentiment analysis techniques to predict homophobia in portuguese tweetsFundação Getulio Vargas · 2018
- DissertaçãoAnálise de sentimento para textos curtosFundação Getulio Vargas · 2017