Sem muitas palavras vamos entender as 16 Perguntas Antes de Criar Sua Arquitetura! Sem enrolação neste artigo iremos entender quais serão as 16 perguntas que precisamos responder, antes de definir qual será a sua arquitetura do pipeline ou pipelines de dados.
COM ISSO VAMOS ENTENDER AS PERGUNTAS…
- Quais são os requisitos do negócio?
- Quais resultados finais são necessários?
- Se os dados estão disponíveis, quais são as fontes?
- Quais tipos de formato(s) de dados estão disponíveis?
- Qual o Crescimento esperado do volume de dados?
- Quanto espaço de armazenamento será necessário?
- Quanta capacidade computacional será necessária?
- Usaremos dados em streaming, em batch ou ambos?
- Já temos tecnologias necessárias que permitam criar pipelines?
- Quais as tecnologias que devemos considerar para o projeto?
- Quais são os acordo de Nível de serviço (SLA’s)?
- Qual o custo de implementar e manter os pipelines?
- Qual será o destino do pipeline?
- Como será o monitoramento?
- Usaremos diversos pipeline encadeados?
- Vamos criar pipelines de dados locais, na nuvem ou ambos?
Agora sim, com esta pergunta respondida, (16 Perguntas Antes de Criar Sua Arquitetura?), aí sim estaremos em condições de definir, avaliar e entender qual arquitetura do pipeline ou pipelines de dados será necessária para o seu projeto.