Classificação de dados estacionários e não estacionários baseada em grafos

Métodos baseados em grafos consistem em uma poderosa forma de representação e abstração de dados que proporcionam, dentre outras vantagens, representar relações topológicas, visualizar estruturas, representar grupos de dados com formatos distintos, bem como, fornecer medidas alternativas para caract...

Full description

Bibliographic Details
Main Author: Bertini Júnior, João Roberto
Other Authors: Liang, Zhao
Format: Others
Language:pt
Published: Biblioteca Digitais de Teses e Dissertações da USP 2011
Subjects:
Online Access:http://www.teses.usp.br/teses/disponiveis/55/55134/tde-15032011-102039/
id ndltd-usp.br-oai-teses.usp.br-tde-15032011-102039
record_format oai_dc
collection NDLTD
language pt
format Others
sources NDLTD
topic Aprendizado baseado em grafos
Aprendizado incremental
Classificação multiclasse
Classificação não paramétrica
Concept drift
Formação do grafo
Grafo K-associado
Graph formation
Graph-based learning
Incremental learning
K-associated graph
Medida de pureza
Mudança de conceito
Multi-class classification
Nonparametric classification
Purity measure
spellingShingle Aprendizado baseado em grafos
Aprendizado incremental
Classificação multiclasse
Classificação não paramétrica
Concept drift
Formação do grafo
Grafo K-associado
Graph formation
Graph-based learning
Incremental learning
K-associated graph
Medida de pureza
Mudança de conceito
Multi-class classification
Nonparametric classification
Purity measure
Bertini Júnior, João Roberto
Classificação de dados estacionários e não estacionários baseada em grafos
description Métodos baseados em grafos consistem em uma poderosa forma de representação e abstração de dados que proporcionam, dentre outras vantagens, representar relações topológicas, visualizar estruturas, representar grupos de dados com formatos distintos, bem como, fornecer medidas alternativas para caracterizar os dados. Esse tipo de abordagem tem sido cada vez mais considerada para solucionar problemas de aprendizado de máquina, principalmente no aprendizado não supervisionado, como agrupamento de dados, e mais recentemente, no aprendizado semissupervisionado. No aprendizado supervisionado, por outro lado, o uso de algoritmos baseados em grafos ainda tem sido pouco explorado na literatura. Este trabalho apresenta um algoritmo não paramétrico baseado em grafos para problemas de classificação com distribuição estacionária, bem como sua extensão para problemas que apresentam distribuição não estacionária. O algoritmo desenvolvido baseia-se em dois conceitos, a saber, 1) em uma estrutura chamada grafo K-associado ótimo, que representa o conjunto de treinamento como um grafo esparso e dividido em componentes; e 2) na medida de pureza de cada componente, que utiliza a estrutura do grafo para determinar o nível de mistura local dos dados em relação às suas classes. O trabalho também considera problemas de classificação que apresentam alteração na distribuição de novos dados. Este problema caracteriza a mudança de conceito e degrada o desempenho do classificador. De modo que, para manter bom desempenho, é necessário que o classificador continue aprendendo durante a fase de aplicação, por exemplo, por meio de aprendizado incremental. Resultados experimentais sugerem que ambas as abordagens apresentam vantagens na classificação de dados em relação aos algoritmos testados === Graph-based methods consist in a powerful form for data representation and abstraction which provides, among others advantages, representing topological relations, visualizing structures, representing groups of data with distinct formats, as well as, supplying alternative measures to characterize data. Such approach has been each time more considered to solve machine learning related problems, mainly concerning unsupervised learning, like clustering, and recently, semi-supervised learning. However, graph-based solutions for supervised learning tasks still remain underexplored in literature. This work presents a non-parametric graph-based algorithm suitable for classification problems with stationary distribution, as well as its extension to cope with problems of non-stationary distributed data. The developed algorithm relies on the following concepts, 1) a graph structure called optimal K-associated graph, which represents the training set as a sparse graph separated into components; and 2) the purity measure for each component, which uses the graph structure to determine local data mixture level in relation to their classes. This work also considers classification problems that exhibit modification on distribution of data flow. This problem qualifies concept drift and worsens any static classifier performance. Hence, in order to maintain accuracy performance, it is necessary for the classifier to keep learning during application phase, for example, by implementing incremental learning. Experimental results, concerning both algorithms, suggest that they had presented advantages over the tested algorithms on data classification tasks
author2 Liang, Zhao
author_facet Liang, Zhao
Bertini Júnior, João Roberto
author Bertini Júnior, João Roberto
author_sort Bertini Júnior, João Roberto
title Classificação de dados estacionários e não estacionários baseada em grafos
title_short Classificação de dados estacionários e não estacionários baseada em grafos
title_full Classificação de dados estacionários e não estacionários baseada em grafos
title_fullStr Classificação de dados estacionários e não estacionários baseada em grafos
title_full_unstemmed Classificação de dados estacionários e não estacionários baseada em grafos
title_sort classificação de dados estacionários e não estacionários baseada em grafos
publisher Biblioteca Digitais de Teses e Dissertações da USP
publishDate 2011
url http://www.teses.usp.br/teses/disponiveis/55/55134/tde-15032011-102039/
work_keys_str_mv AT bertinijuniorjoaoroberto classificacaodedadosestacionariosenaoestacionariosbaseadaemgrafos
AT bertinijuniorjoaoroberto graphbasedclassificationforstationaryandnonstationarydata
_version_ 1719062912935395328
spelling ndltd-usp.br-oai-teses.usp.br-tde-15032011-1020392019-05-09T19:39:18Z Classificação de dados estacionários e não estacionários baseada em grafos Graph-based classification for stationary and non-stationary data Bertini Júnior, João Roberto Aprendizado baseado em grafos Aprendizado incremental Classificação multiclasse Classificação não paramétrica Concept drift Formação do grafo Grafo K-associado Graph formation Graph-based learning Incremental learning K-associated graph Medida de pureza Mudança de conceito Multi-class classification Nonparametric classification Purity measure Métodos baseados em grafos consistem em uma poderosa forma de representação e abstração de dados que proporcionam, dentre outras vantagens, representar relações topológicas, visualizar estruturas, representar grupos de dados com formatos distintos, bem como, fornecer medidas alternativas para caracterizar os dados. Esse tipo de abordagem tem sido cada vez mais considerada para solucionar problemas de aprendizado de máquina, principalmente no aprendizado não supervisionado, como agrupamento de dados, e mais recentemente, no aprendizado semissupervisionado. No aprendizado supervisionado, por outro lado, o uso de algoritmos baseados em grafos ainda tem sido pouco explorado na literatura. Este trabalho apresenta um algoritmo não paramétrico baseado em grafos para problemas de classificação com distribuição estacionária, bem como sua extensão para problemas que apresentam distribuição não estacionária. O algoritmo desenvolvido baseia-se em dois conceitos, a saber, 1) em uma estrutura chamada grafo K-associado ótimo, que representa o conjunto de treinamento como um grafo esparso e dividido em componentes; e 2) na medida de pureza de cada componente, que utiliza a estrutura do grafo para determinar o nível de mistura local dos dados em relação às suas classes. O trabalho também considera problemas de classificação que apresentam alteração na distribuição de novos dados. Este problema caracteriza a mudança de conceito e degrada o desempenho do classificador. De modo que, para manter bom desempenho, é necessário que o classificador continue aprendendo durante a fase de aplicação, por exemplo, por meio de aprendizado incremental. Resultados experimentais sugerem que ambas as abordagens apresentam vantagens na classificação de dados em relação aos algoritmos testados Graph-based methods consist in a powerful form for data representation and abstraction which provides, among others advantages, representing topological relations, visualizing structures, representing groups of data with distinct formats, as well as, supplying alternative measures to characterize data. Such approach has been each time more considered to solve machine learning related problems, mainly concerning unsupervised learning, like clustering, and recently, semi-supervised learning. However, graph-based solutions for supervised learning tasks still remain underexplored in literature. This work presents a non-parametric graph-based algorithm suitable for classification problems with stationary distribution, as well as its extension to cope with problems of non-stationary distributed data. The developed algorithm relies on the following concepts, 1) a graph structure called optimal K-associated graph, which represents the training set as a sparse graph separated into components; and 2) the purity measure for each component, which uses the graph structure to determine local data mixture level in relation to their classes. This work also considers classification problems that exhibit modification on distribution of data flow. This problem qualifies concept drift and worsens any static classifier performance. Hence, in order to maintain accuracy performance, it is necessary for the classifier to keep learning during application phase, for example, by implementing incremental learning. Experimental results, concerning both algorithms, suggest that they had presented advantages over the tested algorithms on data classification tasks Biblioteca Digitais de Teses e Dissertações da USP Liang, Zhao 2011-01-24 Tese de Doutorado application/pdf http://www.teses.usp.br/teses/disponiveis/55/55134/tde-15032011-102039/ pt Liberar o conteúdo para acesso público.