Desenvolvimento de um sistema de business intelligence sob uma arquitetura Data Science as a Service para uma empresa do ramo de manufatura de baterias automotivas

Abstract

As empresas de diferentes ramos têm cada vez mais optado por se tornar data-driven. Ou seja, elas buscam tomar decisões estratégicas baseadas em indicadores. Entretanto, para se atingir tal objetivo, a organização necessita, além de desenvolver uma maturidade analítica, implementar uma infraestrutura moderna e escalável de dados. Logo, a organização manufatora de baterias contratante do projeto descrito neste documento buscava ter acesso à painéis de business intelligence os quais contemplassem dados comerciais da empresa, como volume vendido e faturamento de todas as unidades do país. Ao mesmo tempo buscava-se que a infraestrutura que suporta os relatórios fosse escalável e fizesse o uso de ferramentas adaptáveis ao crescente fluxo de informações. A solução proposta foi a modelagem e hospedagem de um data warehouse na nuvem, com ingestão de dados ocorrendo de forma diária, alimentando a ferramenta de business intelligence. Os dados dentro do repositório central foram formatados seguindo a metodologia star schema, com o relacionamento entre tabelas de fatos e dimensões. O fluxo de trabalho do projeto seguiu os conceitos da metodologia ágil SCRUM, com entregas recorrentes em sprints de duas semanas. Por fim, o resultado obtido foi uma arquitetura robusta de dados na nuvem, centralizada em um data warehouse formatado seguindo boas práticas de modelagem dimensional, que alimenta painéis de business intelligence desenvolvidos com o apoio de conceitos de storytelling e UI (User Interface).

Different field of work companies have decided to become data-driven. In other words, they seek to make strategic decisions based at performance indicators. However, the company needs to implement a scalable, modern data infrastructure to achieve this goal. Therefore, the battery manufacturing company approached at this document intended to develop business intelligence dashboards which showed comercial data from the company. At the same time, it wanted the data structure which supplies business intelligence reports to use scalable applications. The proposed solution was a cloudhosted data warehouse implementation and modeling with daily data ingestion which supplies business intelligence tools. Data located at this central repository were formatted based on star-schema methodology. The project workflow was based on SCRUM agile methodology concepts. Finally, the result accomplished was a robust cloud-hosted data infrastructure centralized at a data warehouse, which was modeled based on dimensional modeling good practices. These data supply business intelligence reports developed based on storytelling and UI concepts.