Buscador de componentes eletrônicos em websites

Abstract

Este trabalho apresenta o processo de criação de um extrator de dados de lojas que vendem componentes eletrônicos na modalidade on-line através da criação de crawlers e scrapers utilizando, para isso, a ferramenta Scrapy do Python. Além disso, o trabalho também mostra a criação do front-end e do back-end de um website (http://ebusca.link) que, além de disponibilizar uma ferramenta de busca que mostra os resultados obtidos com os crawlers, também apresenta um sistema de recomendação o qual, por sua vez, pode ser dividido em um recomendador principal (por popularidade) e em um recomendador secundário (por um modelo de clustering).

This work presents the process of creating a data extractor for stores that sell electronic components in the online modality through the creation of crawlers and scrapers using the Scrapy tool from Python. In addition, the work also shows the creation of the front-end and back-end of a website (http://ebusca.link) that provides a search tool that shows the results obtained with the crawlers, as well as presents a recommendation system which, in turn, can be divided into a main recommender (by popularity) and a secondary recommender (by a clustering model).