Wyszukiwarka
Influence of YARN Schedulers on Power Consumption and Processing Time for Various Big Data Benchmarks
Abstrakt
Climate change caused by human activities can influence the lives of everybody onthe planet. The environmental concerns must be taken into consideration by all fields of studyincludingICT. Green Computing aims to reduce negative effects of IT on the environment while,at the same time, maintaining all of the possible benefits it provides. Several Big Data platformslike Apache Spark orYARNhave become widely used in analytics and High-PerformanceComputing systems due to the reliability and usability of Map Reduce implementations. Theauthors research the power consumption and energy efficiency of HadoopYARNschedulers usingApache Spark under three different workloads. The test cases include: sorting large binary files,counting unique words in large text files and processing satellite imagery from the Sentinel-2mission. The presented results show small (2%–11%) but distinct differences in the powerconsumption ofFIFOandFAIRschedulers
Cytowania
-
0
CrossRef
-
0
Web of Science
-
0
Scopus
Autorzy (3)
Cytuj jako
Pełna treść
- Wersja publikacji
- Accepted albo Published Version
- DOI:
- Cyfrowy identyfikator dokumentu elektronicznego (otwiera się w nowej karcie) 10.17466/tq2018/22.4/c
- Licencja
-
otwiera się w nowej karcie
Słowa kluczowe
Informacje szczegółowe
- Kategoria:
- Publikacja w czasopiśmie
- Typ:
- artykuły w czasopismach
- Opublikowano w:
-
TASK Quarterly
nr 22,
strony 303 - 312,
ISSN: 1428-6394 - Język:
- angielski
- Rok wydania:
- 2019
- Opis bibliograficzny:
- Drypczewski K., Proficz J., Stepnowski A.: Influence of YARN Schedulers on Power Consumption and Processing Time for Various Big Data Benchmarks// TASK Quarterly -Vol. 22,iss. 4 (2019), s.303-312
- DOI:
- Cyfrowy identyfikator dokumentu elektronicznego (otwiera się w nowej karcie) 10.17466/tq2018/22.4/c
- Źródła finansowania:
-
- Publikacja bezkosztowa
- Weryfikacja:
- Politechnika Gdańska
wyświetlono 155 razy
Publikacje, które mogą cię zainteresować
Big Data from Sensor Network via Internet of Things to Edge Deep Learning for Smart City
- J. Balicki,
- H. Balicka,
- P. Dryja
Big Data and the Internet of Things in Edge Computing for Smart City
- J. Balicki,
- H. Balicka,
- P. Dryja
- + 1 autorów