Ocena wydajności frameworków Hadoop, Spark i Flink w środowisku chmury hybrydowej

Speaker(s)

Rem Karablin

Affiliation

MIMUW

Language of the talk

Polish

Date

Jan. 20, 2026, 11 a.m.

Room

room 4060

Seminar

Seminarium "DeSeR: Dane, strumienie, rozpraszanie"

---

Problemem jest brak kompleksowej i porównawczej oceny frameworków Hadoop, Spark i Flink w środowisku chmury hybrydowej, w którym kluczowymi wyzwaniami są opóźnienia sieciowe, ograniczona przepustowość WAN oraz koszty wynikające z mechanizmu cloud burstingu; w celu rozwiązania tego problemu autorzy projektują i implementują rzeczywistą chmurę hybrydową opartą na OpenStack (część prywatna) i Microsoft Azure (część publiczna), a następnie przeprowadzają kontrolowane eksperymenty z użyciem identycznych obciążeń batchowych i iteracyjnych oraz różnych konfiguracji rozmieszczenia węzłów, co umożliwia obiektywną analizę wpływu architektury hybrydowej na czas wykonania, wykorzystanie zasobów, skalowalność i koszty przetwarzania danych.

---