MyWatson: A system for interactive acess of personal records EVALUATED

Detalhes: Com o numero de fotografias tiradas pelas pessoas a aumentar, é cada vez mais difícil para uma pessoa comum gerir todas as fotos na sua biblioteca digital, e achar uma fotografia específica numa galeria grande prova-se um desafio. Nesta tese, o sistema MyWatson é proposto, uma aplicação na web que utiliza recuperação de imagens baseada em conteúdo, aprendizagem profunda, e agrupamento, que tem como objectivo resolver o problema da recuperação de imagens focando-se no utilizador. O MyWatson é desenvolvido sobre a framework Django, uma framework com Python de alto nível, e utiliza extração automática de etiquetas e uma interface de utilizador amigável que permite aos utilizadores pesquisar fotos na sua galeria de imagens com recurso a uma query por palavra-chave. As características do MyWatson incluem a habilidade de carregar e etiquetar múltiplas fotos automaticamente de uma só vez utilizando a API Google Cloud Vision, detectar e agrupar faces de acordo com as suas respectivas similaridades utilizando uma rede neural convolucional construída sobre o Keras e o Tensorflow, usada como extractora de características, e um algoritmo de agrupamento hierárquico que gera vários grupos de agrupamentos. Além de discutir técnicas do estado da arte, apresentar as APIs e tecnologias utilizadas e explicar a arquitectura do sistema com detalhe, uma avaliação heurística é corroborada pelos resultados de questionários respondidos pelos utilizadores. No geral, estes manifestaram interesse na aplicação e a necessidade de funcionalidades que os ajudassem a alcançar uma melhor gestão de uma grande coleção de fotografias.

Discussão: novembro 7, 2018, 9:0

Publicação

Obra sujeita a Direitos de Autor

Orientação

AUTOR

Pedro Miguel dos Santos Duarte (ist178328)

ORIENTADOR

Arlindo Manuel Limede de Oliveira

Departamento de Engenharia Informática (DEI)

Professor Catedrático