Web crawlers para netnografia: uma proposta para análise e mapeamento de redes sociais

A Netnografia envolve observar as interações e relações que concorrem no meio digital com finalidade de compreender como a sociedade age, uma das maneiras de realizar essas observações é analisar os dados que as pessoas publicam em redes sociais. Este trabalho desenvolveu um web crawler para os projetos FragUrb e Dataluta de tal forma que a ferramenta criada também foi capaz uma aproximação entre as áreas das ciências humanas das ciências exatas onde tal realização só foi viável a partir da parceria entre o Laboratório Interdisciplinar em Tecnologias, Educação e Computação (LITEC) da Universidade Federal do Pará (UFPA) com a Universidade Estadual Paulista (UNESP), com foco na rede social do Twitter para coletar dados de postagens realizadas a partir de um termo de busca e armazená-los em um banco de dados NoSQL, disponibilizando sua visualização a partir de uma plataforma web. Os recursos utilizados para o desenvolvimento do trabalho foram a linguagem de programação python 3.9 e suas bibliotecas e para o banco de dados utilizamos o MongoDB. A abordagem metodológica consistiu, inicialmente, em uma pesquisa ampla de trabalhos direcionados para ampliar o entendimento do estado da arte e o estado da prática voltados para a elaboração de um crawler do twitter, aprofundando a pesquisa sobre a Interface de Programação de Aplicação (API) do twitter e questões relacionadas ao uso de ferramentas mais apropriadas para Análise de Redes Sociais; a partir desta construção de conhecimento foi possível desenvolver o script da ferramenta e integrá-la a uma plataforma web. O crawler teve êxito na obtenção de dados para as duas frentes do projeto, foram implementados testes com o intuito de a partir dos dados das buscas realizarmos uma análise de dados para obter insights sobre o comportamento das pessoas que publicam nesta rede, foi possível mapear as postagem e encontrar os usuários mais influentes de acordo com o termo escolhido como foi o caso da busca pelo termo #foraBolsonaro onde foi possível obter 3815 Tweets e 7363 Retweets. A ferramenta desenvolvida foi de grande valor para os pesquisadores voltados para a Netnografia dos projetos FragUrb e Dataluta, pois ao automatizar a captura de uma grande quantidade de dados, disponibilizar a visualização destas amostras para aplicação em suas análises geográficas, as quais são fundamentais para o entendimento das relações dos indivíduos, eventos e papéis com o qual as comunidades influenciam o mundo digital.