Plataforma SAAS ETL
Desafio
Criar uma plataforma de software como serviço (SAAS) ETL para os clientes extraírem, transformarem e carregarem dados para o seu data warehouse ou outro repositório de dados. As fontes de transferência de dados são várias bases de dados como Microsoft, Oracle e outras. A plataforma transfere informações sem exigir uma ligação direta entre bases de dados.
Abordagem
Todo o trabalho foi realizado de forma Ágil.
No desenvolvimento, utilizámos uma abordagem flexível e a capacidade de adicionar novos tipos de repositórios tais como formatos de ficheiros e de bases de dados. O mapeamento de dados não exige pelo menos algum entendimento técnico. Em geral, utilizamos três abordagens para escolher: Manual, Semi-automatizado, Totalmente automatizado.
Funcionalidades Chave
A plataforma oferece a capacidade de receber e transferir vários tipos de ficheiros como tabelas Excel, ficheiros json, ficheiros CSV, etc. É fácil transformar ficheiros e diferentes tipos de tabelas. Podemos criar novos repositórios e bases de dados. Transferência de dados implementada com um agendamento pré-configurado.
A plataforma oferece a funcionalidade para transferir uma grande quantidade de dados. As definições podem ser feitas visualmente, não sendo necessário um conhecimento profundo de bases de dados para a transformação.
Resultado
O cliente recebe uma solução que pode usar tanto para exportação ou transferência de dados pontual como permanente de um formato para outro, independentemente do formato dos dados.