Data/hora: 22/05/2024 23:25:50

Biblioteca(s): | Embrapa Agricultura Digital.
Data corrente: | 27/01/2011
Data da última atualização: | 13/04/2011
Autoria: | MOURA, M. F.; MAGALHÃES, R. B.
Afiliação: | MARIA FERNANDA MOURA, CNPTIA; RODRIGO BUSTAMANTE MAGALHÃES, IC/UNICAMP, Estagiário/CNPTIA.
Título: | NGramSel - N-gram Selection. Versão 1.0.
Ano de publicação: | 2010
Fonte/Imprenta: | Campinas: Embrapa Informática Agropecuária, 2010.
Descrição Física: | 1 CD-ROM.
Idioma: | Português
Conteúdo: | Este software seleciona n-gramas que sejam estatisticamente considerados significantes em uma coleção de textos.  Neste contexto, n-gramas foram considerados como combinações de palavras de uma coleção de textos, por exemplo: "informática", "agropecuária", "informática agropecuária'", "desenvolvimento da informática agropecuária". Um n-grama é considerado estatisticamente significante em uma coleção de  textos se a sua ocorrência não é aleatória e tem algum peso na coleção, por exemplo, o n-grama "informática agropecuária" provavelmente não é aleatório, porém "inteligência agropecuária" poderia ser. Para testar a hipótese de relevância/significância utilizam-se testes de interdependência entre as partes do n-grama em relação a todos os n-gramas obtidos a partir da coleção de textos., e, para tal, vários métodos podem ser empregados. Este software implementa o método proposto por seus autores, com um algoritmo muito simples e computacionalmente eficiente, que decompõe os n-gramas em n-gramas mais simples e os testa do mais simples para os mais complexos, considerando apenas os formados pelos mais simples e estatisticamente significantes; e, utilizando um teste estatístico robusto, o Q de Yule aplicado à decomposição de tabelas de contingência. Os dados de entrada são matrizes do tipo atributo-valor para a coleção de textos  completa e cada conjunto de n-gramas.  A saída são novas matrizes atributo-valor com apenas os n-gramas de interesse.
Palavras-Chave: | Algoritmo; Mineração de textos; N-gramas; Recuperação da informação; Software.
Thesaurus Nal: | Algorithms; Information retrieval.
Categoria do assunto: | X Pesquisa, Tecnologia e Engenharia
Registro original: | Embrapa Agricultura Digital (CNPTIA)
Exemplares: | CNPTIA - (15493-1) - UMT - SW - CD - NGRAMSEL1.0 -  - 2011.00067 - DIS