Dissertação

SDD4Streaming EVALUATED

Com a quantidade cada vez maior de dispositivos que se conectam à Internet, sendo Internet das Coisas (IOT) um exemplo disso, aumenta também a quantidade de dados que precisam ser processados. O Stream Processing foi criado com o único propósito de lidar com grandes volumes de dados e provou repetidamente que pode lidar com isso com sucesso. No entanto, ainda é necessário melhorar ainda mais a escalabilidade e o desempenho desses sistemas. Este trabalho propõe o SDD4Streaming, uma solução que vem mitigar estes problemas específicos dos Stream Processing Engines. Os motores atuais já implementam soluções de escalabilidade, mas com o tempo vimos que isso não é suficiente e são necessárias mais melhorias. Portanto, SDD4Streaming emprega uma extensão do sistema atual para melhorar o uso de recursos, de forma que as aplicações usem os recursos de que precisam para processar dados no menor tempo possível, aumentando assim o desempenho e ajudando outros aplicativos que estão sendo executados em paralelo no mesmo sistema.
Processamento em fluxo, Apache Flink, Gestão de Recursos, Escalabilidade, Desempenho

janeiro 22, 2021, 10:30

Publicação

Obra sujeita a Direitos de Autor

Orientação

ORIENTADOR

Sérgio Ricardo de Oliveira Esteves

INESC

Researcher of Computer Science in the Distributed Systems Group (GSD)

ORIENTADOR

Luís Manuel Antunes Veiga

Departamento de Engenharia Informática (DEI)

Professor Associado