Dissertação

{pt_PT=Toolkit For Gesture Classification Through Acoustic Sensing} {} EVALUATED

{pt=A interacção com dispositivos tácteis tem-se tornado cada vez mais popular graças ao crescimento do mercado de dispositivos móveis. Toda as pessoas possuem pelo menos um dispositivo deste tipo, e usam-no regularmente. Milhares de aplicações têm vindo a ser desenvolvidas para este tipo de dispositivos. No entanto, estas aplicações não utilizam todo o potencial do gesto do utilizador, pois focam-se apenas na localização do toque na superficie. Este trabalho propõe uma nova abordagem para identificar e classificar gestos com diferentes assinaturas acústicas. O resultado deste trabalho é um toolkit que disponibiliza estas funcionalidades de forma simples e intuitiva para programadores de aplicações para dispositivos móveis. São descritos a arquitectura e o desenho deste toolkit, bem como os principais processos que o compõem. Para avaliar esta abordagem, foram construidas algumas aplicações para validar a integração do toolkit, bem como a utilização das suas funcionalidades em aplicações concretas., en=The interaction with touch displays has become increasingly popular with the growth of the mobile devices market. Most people already own at least one of these devices, and use them regularly. By extension, touch displays, and all applications that make use of this technology have become quite popular, available by the thousands nowadays. However, these applications don’t make full use of a user gesture’s potential, focusing mainly on hand’s position and shape. This work proposes a new approach to identify and classify gestures with different acoustic signatures. To tackle this problem, we proposed an approach to gesture classification through the sound produced by interaction on a surface. This approach is provided as a development toolkit, to integrate these features into applications, while freeing the developer from the need to understand and implement complex classification and audio processing algorithms. We detail the components of the toolkit’s architecture, and describe the main processes it implements. To explore and evaluate this approach, a set of applications was developed, that use the toolkit as a mean to improve interaction and map user’s gestures to concrete actions. The main outcome of this work is a toolkit built to simplify the development of applications that make full use of a user’s gestures, and that allows an expedite mapping between the application’s features and an easily distinguishable gesture.}
{pt=detecção acústica, desenvolvimento de toolkits, classificação de gestos, processamento de som, interacção, desenvolvimento de aplicações, en=acoustic sensing, toolkit development, gesture classification, audio processing, interaction, application development}

novembro 13, 2015, 11:30

Publicação

Obra sujeita a Direitos de Autor

Orientação

ORIENTADOR

Joaquim Armando Pires Jorge

Departamento de Engenharia Informática (DEI)

Professor Catedrático