Desenvolvimento de um sistema automatizado de aquisição de dados da plataforma Booking

Abstract

Esta monografia trata do projeto e implementação de um sistema de aquisição automatizada de dados para a Seazone, uma empresa brasileira especializada na administração de imóveis para aluguel por temporada. O projeto visa solucionar a falta de dados relevantes para análises de mercado provenientes do Booking, uma grande referência na indústria das Online Travel Agencies (OTAs). A coleta das informações é realizada com o uso de web Scrapers, programas especializados na coleta de informações públicas espalhadas pela internet. O sistema de aquisição é inserido na plataforma de serviços de nuvem AWS, onde é feito amplo proveito de recursos de computação distribuída, processamento e armazenamento de dados. A implementação do projeto é realizada através de uma metodologia arquitetada para o desenvolvimento sistemático de web scrapers, incluindo etapas de exploração dos sites, testes remotos e integração com a nuvem. Os dados coletados pelo sistema são inseridos no Data Lake da Seazone, local em que são arquivados para o uso posterior em tomadas de decisão e processos analíticos da empresa. O projeto alcançou grandes avanços no desenvolvimento da infraestrutura de coleta de dados da empresa, sendo capaz de extrair semanalmente informações relevantes acerca de um grande número de listagens do Booking.