Abstrakt
While many scientific, large-scale applications are data-intensive, fast and efficient I/O operations have become of key importance for HPC environments. We propose an MPI I/O extension based on in-system distributed cache with data located in Non-volatile Random Access Memory (NVRAM) available in each cluster node. The presented architecture makes effective use of NVRAM properties such as persistence and byte-level access behind the MPI I/O API. Another advantage of the proposed solution is making development of a parallel application easy and efficient as a programmer just needs to use the well known MPI I/O data model and API while efficient file access is automatically provided without a need for application level optimizations like avoiding frequent operations on a small data. Results of experiments obtained with three different applications suggest, that the extension significantly reduces file access time, especially for small I/O operations. By locating cache facilities on computing nodes, the extension decreases load of file system servers and makes I/O scalable
Cytowania
-
3
CrossRef
-
0
Web of Science
-
0
Scopus
Autorzy (7)
Cytuj jako
Pełna treść
- Wersja publikacji
- Accepted albo Published Version
- DOI:
- Cyfrowy identyfikator dokumentu elektronicznego (otwiera się w nowej karcie) 10.15439/2016F52
- Licencja
- otwiera się w nowej karcie
Słowa kluczowe
Informacje szczegółowe
- Kategoria:
- Aktywność konferencyjna
- Typ:
- publikacja w wydawnictwie zbiorowym recenzowanym (także w materiałach konferencyjnych)
- Opublikowano w:
-
Annals of Computer Science and Information Systems
nr 9,
strony 133 - 140,
ISSN: 2300-5963 - Tytuł wydania:
- Position Papers of the 2016 Federated Conference on Computer Science and Information Systems strony 133 - 140
- Język:
- angielski
- Rok wydania:
- 2016
- Opis bibliograficzny:
- Malinowski A., Czarnul P., Dorożyński P., Czuryło, K., Dorau, Ł., Maciejewski, M., Skowron P.: A Parallel MPI I/O Solution Supported by Byte-addressable Non-volatile RAM Distributed Cache// Position Papers of the 2016 Federated Conference on Computer Science and Information Systems/ ed. 2016 : , 2016, s.133-140
- DOI:
- Cyfrowy identyfikator dokumentu elektronicznego (otwiera się w nowej karcie) 10.15439/2016f52
- Weryfikacja:
- Politechnika Gdańska
wyświetlono 132 razy
Publikacje, które mogą cię zainteresować
A Fail-Safe NVRAM Based Mechanism for Efficient Creation and Recovery of Data Copies in Parallel MPI Applications
- A. Malinowski,
- P. Czarnul,
- M. Maciejewski
- + 1 autorów