Network-aware Data Prefetching Optimization of Computations in a Heterogeneous HPC Framework

Paweł Rościszewski

doi:10.5121/ijcnc.2014.6506

Network-aware Data Prefetching Optimization of Computations in a Heterogeneous HPC Framework

Abstrakt

Rapid development of diverse computer architectures and hardware accelerators caused that designing parallel systems faces new problems resulting from their heterogeneity. Our implementation of a parallel system called KernelHive allows to efficiently run applications in a heterogeneous environment consisting of multiple collections of nodes with different types of computing devices. The execution engine of the system is open for optimizer implementations, focusing on various criteria. In this paper, we proposea new optimizer for KernelHive, that utilizes distributed databases and performs data prefetching to optimize the execution time of applications, which process large input data. Employing a versatile data management scheme, which allows combining various distributed data providers, we propose using NoSQL databases for our purposes. We support our solution with results of experiments with real executions of our OpenCL implementation of a regular expression matching application in various hardware configurations. Additionally, we propose a network-aware scheduling scheme for selecting hardware for the proposed optimizer and present simulations that demonstrate its advantages.

Cytowania

1

CrossRef
0

Web of Science
0

Scopus

Autor (1)

Paweł Rościszewski dr inż.

Cytuj jako

Pełna treść

pobierz publikację

pobrano 31 razy

Wersja publikacji: Accepted albo Published Version
DOI:: Cyfrowy identyfikator dokumentu elektronicznego (otwiera się w nowej karcie) 10.5121/ijcnc.2014.6506
Licencja: otwiera się w nowej karcie

pełna treść artykułu zobacz w serwisie zewnętrznym otwiera się w nowej karcie

Słowa kluczowe

Informacje szczegółowe

Kategoria:: Publikacja w czasopiśmie
Typ:: artykuły w czasopismach recenzowanych i innych wydawnictwach ciągłych
Opublikowano w:: International Journal of Computer Networks & Communications (IJCNC) nr 6, wydanie 5, strony 85 - 98,
ISSN: 0975-2293
Język:: angielski
Rok wydania:: 2014
Opis bibliograficzny:: Rościszewski P.: Network-aware Data Prefetching Optimization of Computations in a Heterogeneous HPC Framework// International Journal of Computer Networks & Communications (IJCNC). -Vol. 6., iss. 5 (2014), s.85-98
DOI:: Cyfrowy identyfikator dokumentu elektronicznego (otwiera się w nowej karcie) 10.5121/ijcnc.2014.6506
Weryfikacja:: Politechnika Gdańska