Detecção de anomalias na captura de dados em lojas de e-commerce

Abstract

O presente trabalho foi desenvolvido na empresa Linx Sistemas e Consultoria Ltda., líder no Brasil em personalização de comércio eletrônico. Neste trabalho foi desenvolvido um algoritmo de detecção de falhas na coleta de eventos em lojas de comércio eletrônico. O algoritmo foi testado em dados reais provenientes de coleta da empresa e cenários de falha foram isolados para seu desenvolvimento. O mesmo procura melhorar o processo de detecção de falhas, hoje feito por um outro algoritmo com escopo limitado de detecção e muito suscetível a falsos-positivos. O algoritmo desenvolvido baseia-se no histórico do cliente (conforme o dia da semana) para então concluir sobre uma possível falha, utilizando uma abordagem estatística para tal, baseada em médias e desvio padrão dos dados dos clientes. Os dois algoritmos são comparados diariamente e como resultado salienta-se as melhorias do algoritmo proposto, tanto no escopo de detecção, uma abrangência maior de falhas podem ser detectadas, quanto na redução de falsos-positivos.

The current work was developed at Linx Sistemas e Consultoria Ltda., Brazil’s leading e-commerce personalization company. In this work, a fault-detection algorithm was developed for capturing events in e-commerces. The algorithm was tested within company’s real data and failure scenarios were isolated for its development. The algorithm intends to improve fault-detection process, which is currently performed by another algorithm with limited scope and very susceptible to false positives. The developed algorithm uses client’s historical data (according to the day of the week) to detect a possible failure through a statistical approach based on the means and standard deviation of the customer data. Both algorithms are compared on a daily basis. As a result of the study, we highlight the improvements perceived with the proposed algorithm, both in the scope of detection, as a greater range of failures can be detected, as well as in the reduction of false positives.