Uma arquitetura de preservação a longo prazo de Big Data com gerenciamento de elasticidade em nuvem.
Com o crescimento exponencial do volume de dados estruturados e não estruturados (Big Data) em sistemas de armazenamento corporativos, aliado à também crescente demanda por preservação de tais dados devido a regulamentações e auditorias, surge o problema da preservação a longo prazo de Big Data,...
Main Author: | |
---|---|
Other Authors: | |
Language: | Portuguese |
Published: |
Universidade de São Paulo
2018
|
Subjects: | |
Online Access: | http://www.teses.usp.br/teses/disponiveis/3/3141/tde-05112018-152833/ |
id |
ndltd-IBICT-oai-teses.usp.br-tde-05112018-152833 |
---|---|
record_format |
oai_dc |
spelling |
ndltd-IBICT-oai-teses.usp.br-tde-05112018-1528332019-01-22T00:29:05Z Uma arquitetura de preservação a longo prazo de Big Data com gerenciamento de elasticidade em nuvem. An architecture for long term preservation of Big Data with elasticity management in the cloud. Phillip Luiz Viana Liria Matsumoto Sato Jorge Rady de Almeida Junior Pedro Luiz Pizzigatti Corrêa Charles Boulhosa Rodamilans Arquitetura e organização de computadores Big Data Computação em nuvem Preservação digital Big Data Cloud computing Computer architecture and organization Digital preservation Com o crescimento exponencial do volume de dados estruturados e não estruturados (Big Data) em sistemas de armazenamento corporativos, aliado à também crescente demanda por preservação de tais dados devido a regulamentações e auditorias, surge o problema da preservação a longo prazo de Big Data, e mais especificamente o de como estender sistemas existentes ao longo do tempo. Pesquisas recentes contemplam arquiteturas de preservação de dados estruturados ou de arquivamento a curto prazo de Big Data, porém carecem de um modelo para arquiteturas que suportem a preservação a longo prazo de Big Data com elasticidade. Na presente tese, propõe-se uma arquitetura para o arquivamento, preservação a longo prazo e recuperação de Big Data com elasticidade. Um método de criação de arquiteturas de referência foi seguido e obteve-se como resultado uma arquitetura de preservação a longo prazo que é reprodutível e capaz de adaptar-se a uma demanda crescente, recebendo Big Data de fontes heterogêneas continuamente. A arquitetura é compatível com computação em nuvem e foi testada com diversas mídias de armazenamento, como mídias magnéticas, nuvem e de estado sólido. É feito também um comparativo entre a arquitetura desenvolvida e outras arquiteturas disponíveis. With the exponential growth in the volume of structured and unstructured data (Big Data) in enterprise storage systems, along with the also increasing demand for preservation of such data due to regulations and audits, there arises the problem of long-term preservation of Big Data, and more specifically of how to extend existing systems with time. Recent research projects encompass architectures for the preservation of structured data or short term archiving of Big Data, however they lack a model for architectures that support long-term preservation of Big Data with elasticity. In the present thesis, we propose an architecture for the archiving, longterm preservation and retrieval of Big Data with elasticity. A method for creating reference architectures was followed and as a result a reproducible long-term preservation architecture was obtained, which is capable of adapting to a growing demand receiving Big Data continuously. The architecture is compatible with cloud computing and was tested against several storage media, such as magnetic media, cloud and solid state. A comparison between the architecture and other available architectures is also provided. g Data. Unstructured data. Elasticity. 2018-06-13 info:eu-repo/semantics/publishedVersion info:eu-repo/semantics/doctoralThesis http://www.teses.usp.br/teses/disponiveis/3/3141/tde-05112018-152833/ por info:eu-repo/semantics/openAccess Universidade de São Paulo Engenharia Elétrica USP BR reponame:Biblioteca Digital de Teses e Dissertações da USP instname:Universidade de São Paulo instacron:USP |
collection |
NDLTD |
language |
Portuguese |
sources |
NDLTD |
topic |
Arquitetura e organização de computadores
Big Data Computação em nuvem Preservação digital Big Data Cloud computing Computer architecture and organization Digital preservation |
spellingShingle |
Arquitetura e organização de computadores
Big Data Computação em nuvem Preservação digital Big Data Cloud computing Computer architecture and organization Digital preservation Phillip Luiz Viana Uma arquitetura de preservação a longo prazo de Big Data com gerenciamento de elasticidade em nuvem. |
description |
Com o crescimento exponencial do volume de dados estruturados e não estruturados (Big Data) em sistemas de armazenamento corporativos, aliado à também crescente demanda por preservação de tais dados devido a regulamentações e auditorias, surge o problema da preservação a longo prazo de Big Data, e mais especificamente o de como estender sistemas existentes ao longo do tempo. Pesquisas recentes contemplam arquiteturas de preservação de dados estruturados ou de arquivamento a curto prazo de Big Data, porém carecem de um modelo para arquiteturas que suportem a preservação a longo prazo de Big Data com elasticidade. Na presente tese, propõe-se uma arquitetura para o arquivamento, preservação a longo prazo e recuperação de Big Data com elasticidade. Um método de criação de arquiteturas de referência foi seguido e obteve-se como resultado uma arquitetura de preservação a longo prazo que é reprodutível e capaz de adaptar-se a uma demanda crescente, recebendo Big Data de fontes heterogêneas continuamente. A arquitetura é compatível com computação em nuvem e foi testada com diversas mídias de armazenamento, como mídias magnéticas, nuvem e de estado sólido. É feito também um comparativo entre a arquitetura desenvolvida e outras arquiteturas disponíveis.
===
With the exponential growth in the volume of structured and unstructured data (Big Data) in enterprise storage systems, along with the also increasing demand for preservation of such data due to regulations and audits, there arises the problem of long-term preservation of Big Data, and more specifically of how to extend existing systems with time. Recent research projects encompass architectures for the preservation of structured data or short term archiving of Big Data, however they lack a model for architectures that support long-term preservation of Big Data with elasticity. In the present thesis, we propose an architecture for the archiving, longterm preservation and retrieval of Big Data with elasticity. A method for creating reference architectures was followed and as a result a reproducible long-term preservation architecture was obtained, which is capable of adapting to a growing demand receiving Big Data continuously. The architecture is compatible with cloud computing and was tested against several storage media, such as magnetic media, cloud and solid state. A comparison between the architecture and other available architectures is also provided. g Data. Unstructured data. Elasticity.
|
author2 |
Liria Matsumoto Sato |
author_facet |
Liria Matsumoto Sato Phillip Luiz Viana |
author |
Phillip Luiz Viana |
author_sort |
Phillip Luiz Viana |
title |
Uma arquitetura de preservação a longo prazo de Big Data com gerenciamento de elasticidade em nuvem.
|
title_short |
Uma arquitetura de preservação a longo prazo de Big Data com gerenciamento de elasticidade em nuvem.
|
title_full |
Uma arquitetura de preservação a longo prazo de Big Data com gerenciamento de elasticidade em nuvem.
|
title_fullStr |
Uma arquitetura de preservação a longo prazo de Big Data com gerenciamento de elasticidade em nuvem.
|
title_full_unstemmed |
Uma arquitetura de preservação a longo prazo de Big Data com gerenciamento de elasticidade em nuvem.
|
title_sort |
uma arquitetura de preservação a longo prazo de big data com gerenciamento de elasticidade em nuvem. |
publisher |
Universidade de São Paulo |
publishDate |
2018 |
url |
http://www.teses.usp.br/teses/disponiveis/3/3141/tde-05112018-152833/ |
work_keys_str_mv |
AT phillipluizviana umaarquiteturadepreservacaoalongoprazodebigdatacomgerenciamentodeelasticidadeemnuvem AT phillipluizviana anarchitectureforlongtermpreservationofbigdatawithelasticitymanagementinthecloud |
_version_ |
1718921986268200960 |