FenixEdu™

Dissertação

Data Extraction and Integration for the Creation of a Database Describing Portuguese Unions and other Social Partners EVALUATED

Detalhes: O desenvolvimento de uma base de dados completa e consistente levanta muitos desafios, relacionados à coleta e integração de dados de várias fontes. A DGERT (Direção-Geral do Emprego e das Relações de Trabalho) é responsável pela publicação de um boletim oficial semanal com informações detalhadas sobre as organizações de trabalho e sobre as suas atividades. Este instituto também possui informações sobre organizações sindicais e patronais em diferentes fontes de dados. No âmbito deste trabalho, foi desenvolvida uma base de dados sobre organizações sindicais e patronais portuguesas, juntamente com uma interface web de apoio à exploração dos dados. A base de dados desenvolvida contém informações obtidas a partir das diferentes fontes de dados disponibilizadas pela DGERT. A base de dados foi desenvolvida através de procedimentos de extração de informação e integração de dados, visando o apoio a diferentes estudos nas ciências sociais. Para o desenvolvimento da interface web, foi utilizada a framework Flask. O desenvolvimento da base de dados envolveu múltiplas pequenas tarefas. Futuramente, é possível aprimorar essas tarefas, de forma a melhorar a quantidade de dados e a qualidade da base de dados.
Keywords: Extração de dados, Limpeza de dados, Integração de dados, Serviço web, Aplicação web

Discussão: janeiro 18, 2021, 9:0