Uma arquitetura de preservação a longo prazo de Big Data com gerenciamento de elasticidade em nuvem.

Com o crescimento exponencial do volume de dados estruturados e não estruturados (Big Data) em sistemas de armazenamento corporativos, aliado à também crescente demanda por preservação de tais dados devido a regulamentações e auditorias, surge o problema da preservação a longo prazo de Big Data,...

Full description

Bibliographic Details
Main Author: Phillip Luiz Viana
Other Authors: Liria Matsumoto Sato
Language:Portuguese
Published: Universidade de São Paulo 2018
Subjects:
Online Access:http://www.teses.usp.br/teses/disponiveis/3/3141/tde-05112018-152833/
id ndltd-IBICT-oai-teses.usp.br-tde-05112018-152833
record_format oai_dc
spelling ndltd-IBICT-oai-teses.usp.br-tde-05112018-1528332019-01-22T00:29:05Z Uma arquitetura de preservação a longo prazo de Big Data com gerenciamento de elasticidade em nuvem. An architecture for long term preservation of Big Data with elasticity management in the cloud. Phillip Luiz Viana Liria Matsumoto Sato Jorge Rady de Almeida Junior Pedro Luiz Pizzigatti Corrêa Charles Boulhosa Rodamilans Arquitetura e organização de computadores Big Data Computação em nuvem Preservação digital Big Data Cloud computing Computer architecture and organization Digital preservation Com o crescimento exponencial do volume de dados estruturados e não estruturados (Big Data) em sistemas de armazenamento corporativos, aliado à também crescente demanda por preservação de tais dados devido a regulamentações e auditorias, surge o problema da preservação a longo prazo de Big Data, e mais especificamente o de como estender sistemas existentes ao longo do tempo. Pesquisas recentes contemplam arquiteturas de preservação de dados estruturados ou de arquivamento a curto prazo de Big Data, porém carecem de um modelo para arquiteturas que suportem a preservação a longo prazo de Big Data com elasticidade. Na presente tese, propõe-se uma arquitetura para o arquivamento, preservação a longo prazo e recuperação de Big Data com elasticidade. Um método de criação de arquiteturas de referência foi seguido e obteve-se como resultado uma arquitetura de preservação a longo prazo que é reprodutível e capaz de adaptar-se a uma demanda crescente, recebendo Big Data de fontes heterogêneas continuamente. A arquitetura é compatível com computação em nuvem e foi testada com diversas mídias de armazenamento, como mídias magnéticas, nuvem e de estado sólido. É feito também um comparativo entre a arquitetura desenvolvida e outras arquiteturas disponíveis. With the exponential growth in the volume of structured and unstructured data (Big Data) in enterprise storage systems, along with the also increasing demand for preservation of such data due to regulations and audits, there arises the problem of long-term preservation of Big Data, and more specifically of how to extend existing systems with time. Recent research projects encompass architectures for the preservation of structured data or short term archiving of Big Data, however they lack a model for architectures that support long-term preservation of Big Data with elasticity. In the present thesis, we propose an architecture for the archiving, longterm preservation and retrieval of Big Data with elasticity. A method for creating reference architectures was followed and as a result a reproducible long-term preservation architecture was obtained, which is capable of adapting to a growing demand receiving Big Data continuously. The architecture is compatible with cloud computing and was tested against several storage media, such as magnetic media, cloud and solid state. A comparison between the architecture and other available architectures is also provided. g Data. Unstructured data. Elasticity. 2018-06-13 info:eu-repo/semantics/publishedVersion info:eu-repo/semantics/doctoralThesis http://www.teses.usp.br/teses/disponiveis/3/3141/tde-05112018-152833/ por info:eu-repo/semantics/openAccess Universidade de São Paulo Engenharia Elétrica USP BR reponame:Biblioteca Digital de Teses e Dissertações da USP instname:Universidade de São Paulo instacron:USP
collection NDLTD
language Portuguese
sources NDLTD
topic Arquitetura e organização de computadores
Big Data
Computação em nuvem
Preservação digital
Big Data
Cloud computing
Computer architecture and organization
Digital preservation
spellingShingle Arquitetura e organização de computadores
Big Data
Computação em nuvem
Preservação digital
Big Data
Cloud computing
Computer architecture and organization
Digital preservation
Phillip Luiz Viana
Uma arquitetura de preservação a longo prazo de Big Data com gerenciamento de elasticidade em nuvem.
description Com o crescimento exponencial do volume de dados estruturados e não estruturados (Big Data) em sistemas de armazenamento corporativos, aliado à também crescente demanda por preservação de tais dados devido a regulamentações e auditorias, surge o problema da preservação a longo prazo de Big Data, e mais especificamente o de como estender sistemas existentes ao longo do tempo. Pesquisas recentes contemplam arquiteturas de preservação de dados estruturados ou de arquivamento a curto prazo de Big Data, porém carecem de um modelo para arquiteturas que suportem a preservação a longo prazo de Big Data com elasticidade. Na presente tese, propõe-se uma arquitetura para o arquivamento, preservação a longo prazo e recuperação de Big Data com elasticidade. Um método de criação de arquiteturas de referência foi seguido e obteve-se como resultado uma arquitetura de preservação a longo prazo que é reprodutível e capaz de adaptar-se a uma demanda crescente, recebendo Big Data de fontes heterogêneas continuamente. A arquitetura é compatível com computação em nuvem e foi testada com diversas mídias de armazenamento, como mídias magnéticas, nuvem e de estado sólido. É feito também um comparativo entre a arquitetura desenvolvida e outras arquiteturas disponíveis. === With the exponential growth in the volume of structured and unstructured data (Big Data) in enterprise storage systems, along with the also increasing demand for preservation of such data due to regulations and audits, there arises the problem of long-term preservation of Big Data, and more specifically of how to extend existing systems with time. Recent research projects encompass architectures for the preservation of structured data or short term archiving of Big Data, however they lack a model for architectures that support long-term preservation of Big Data with elasticity. In the present thesis, we propose an architecture for the archiving, longterm preservation and retrieval of Big Data with elasticity. A method for creating reference architectures was followed and as a result a reproducible long-term preservation architecture was obtained, which is capable of adapting to a growing demand receiving Big Data continuously. The architecture is compatible with cloud computing and was tested against several storage media, such as magnetic media, cloud and solid state. A comparison between the architecture and other available architectures is also provided. g Data. Unstructured data. Elasticity.
author2 Liria Matsumoto Sato
author_facet Liria Matsumoto Sato
Phillip Luiz Viana
author Phillip Luiz Viana
author_sort Phillip Luiz Viana
title Uma arquitetura de preservação a longo prazo de Big Data com gerenciamento de elasticidade em nuvem.
title_short Uma arquitetura de preservação a longo prazo de Big Data com gerenciamento de elasticidade em nuvem.
title_full Uma arquitetura de preservação a longo prazo de Big Data com gerenciamento de elasticidade em nuvem.
title_fullStr Uma arquitetura de preservação a longo prazo de Big Data com gerenciamento de elasticidade em nuvem.
title_full_unstemmed Uma arquitetura de preservação a longo prazo de Big Data com gerenciamento de elasticidade em nuvem.
title_sort uma arquitetura de preservação a longo prazo de big data com gerenciamento de elasticidade em nuvem.
publisher Universidade de São Paulo
publishDate 2018
url http://www.teses.usp.br/teses/disponiveis/3/3141/tde-05112018-152833/
work_keys_str_mv AT phillipluizviana umaarquiteturadepreservacaoalongoprazodebigdatacomgerenciamentodeelasticidadeemnuvem
AT phillipluizviana anarchitectureforlongtermpreservationofbigdatawithelasticitymanagementinthecloud
_version_ 1718921986268200960