Case Study

Solução

Do ponto de vista arquitetural, o principal desafio foi criar uma estrutura capaz de lidar com enormes volumes diários de dados, mantendo a sua integridade e resiliência, uma vez que existe uma janela horária muito pequena para recuperar esses dados em caso de desastre.

A solução adotada passou pela utilização do Microsoft Azure Data Factory, programado para ingerir os dados em bruto e transformá-los posteriormente por duas vias:

Envio de parte dos dados para o banco relacional Azure SQL Server;
Envio dos restantes dados para o banco não relacional Azure Cosmos DB.

No entanto, essa foi apenas uma parte do desafio. Para a aplicação responder às expectativas e controlar tal volume de dados, estes precisariam de atingir uma elevada velocidade ao serem disponibilizados ao cliente final no front-end. Essa velocidade foi atingida através do uso de técnicas como cache em memória.

A política de cache tem em consideração que, após o utilizador aceder pela primeira vez, grande parte dos seus dados fica disponível em memória e todos os acessos posteriores não necessitam da base de dados, tornando a resposta altamente eficiente.

Do ponto de vista de segurança, o Imovirtual possui regras rigorosas de acesso e validação. Para a entrega deste projeto em produção, foram realizados testes de penetração e a solução foi adequada às políticas de segurança, através da utilização de cofres de segurança para armazenar segredos, senhas e conexões ao banco de dados.