Fórum de Debates do Módulo 2: Pré-visualização do envio

Os envios desta tarefa são as postagens no fórum da tarefa. Abaixo, encontram-se as postagens do fórum de Guilherme Subtil Nunes, ou é possível exibir todo o fórum.

Guilherme Subtil Nunes

Como controlar o volume de dados? É possível implementar tal controle?

Devemos avaliar o cenário de cada empresa, avaliar quais são os dados críticos, dados históricos, dados sensíveis e dados descartáveis de acordo com um período preestabelecido com a empresa. Com base nisto começamos a desenhar a arquitetura do negócio, analisando muitas vezes a tipagem dos dados no SGBD para enxugar ainda mais o volume e consequentemente diminuindo ainda mais a carga na ingestão de dados. A melhor forma com que trabalhei até hoje foi particionando dados nos SGBD's, realizando planos de corte(exclusão de dados), monitorando o crescimento de tabelas e bases por dia, mês e ano para projeções. Claro que hoje avaliar por exemplo dados advindos de IoT seria bem mais complicado no meu ver, o processo poderia ser parecido acredito eu, porém as projeções teriam que ser avaliadas de acordo com o cenário e para melhor resultado acredito que usando machine learning seria mais vantajoso.
Como escalar continuamente os ambientes computacionais para atender às necessidades cada vez maiores das empresas para o armazenamento desta grande quantidade de dados?

Com automações e um ótimo gerenciamento por parte da equipe para poder mitigar melhor todo o cenário sem a necessidade de intervenção humana, de forma que o crescimento tanto horizontal como vertical seja cada vez mais dinâmica. Com as tecnologias cloud, hoje isto é bastante facilitado.
Como manusear e como gerenciar melhor esta grande quantidade de dados?

Conforme respondi nas questões anteriores, porém com as novas tecnologias cloud, machine learning e um gerenciamento contínuo destas novas tecnologias.
Existe um limite para o volume de dados que uma determinada empresa deva armazenar? É preciso armazenar todos os dados? Por quanto tempo?

Conforme respondi na primeira questão, devemos avaliar o cenário da empresa em questão e antes de qualquer implantação, primeiro devemos elaborar bem o planejamento e desenho do projeto. Avaliando também toda a estrutura do LGPD para que a empresa comporte um cenário adequado nos moldes atuais.

<ol>
<li aria-level="1">Como controlar o volume de dados? É possível implementar tal controle?  Devemos avaliar o cenário de cada empresa, avaliar quais são os dados críticos, dados históricos, dados sensíveis e dados descartáveis de acordo com um período preestabelecido com a empresa. Com base nisto começamos a desenhar a arquitetura do negócio, analisando muitas vezes a tipagem dos dados no SGBD para enxugar ainda mais o volume e consequentemente diminuindo ainda mais a carga na ingestão de dados. A melhor forma com que trabalhei até hoje foi particionando dados nos SGBD's, realizando planos de corte(exclusão de dados), monitorando o crescimento de tabelas e bases por dia, mês e ano para projeções. Claro que hoje avaliar por exemplo dados advindos de IoT seria bem mais complicado no meu ver, o processo poderia ser parecido acredito eu, porém as projeções teriam que ser avaliadas de acordo com o cenário e para melhor resultado acredito que usando machine learning seria mais vantajoso.  </li>
<li aria-level="1">
Como escalar continuamente os ambientes computacionais para atender às necessidades cada vez maiores das empresas para o armazenamento desta grande quantidade de dados? Com automações e um ótimo gerenciamento por parte da equipe para poder mitigar melhor todo o cenário sem a necessidade de intervenção humana, de forma que o crescimento tanto horizontal como vertical seja cada vez mais dinâmica. Com as tecnologias cloud, hoje isto é bastante facilitado.  
</li>
<li aria-level="1">
Como manusear e como gerenciar melhor esta grande quantidade de dados? Conforme respondi nas questões anteriores, porém com as novas tecnologias cloud, machine learning e um gerenciamento contínuo destas novas tecnologias. 
</li>
<li aria-level="1">
Existe um limite para o volume de dados que uma determinada empresa deva armazenar? É preciso armazenar todos os dados? Por quanto tempo? Conforme respondi na primeira questão, devemos avaliar o cenário da empresa em questão e antes de qualquer implantação, primeiro devemos elaborar bem o planejamento e desenho do projeto. Avaliando também toda a estrutura do LGPD para que a empresa comporte um cenário adequado nos moldes atuais.  
</li>
</ol>