ДОСЛІДЖЕННЯ ВПЛИВУ НАЛАШТУВАНЬ КОНФІГУРАЦІЙНИХ ПАРАМЕТРІВ НА ПРОДУКТИВНІСТЬ РЕЖИМІВ РОЗГОРТАННЯ APACHE SPARK

Authors

Kharkiv National University of Radio Electronics
Харківський національний економічний університет ім. С. Кузнеця

Abstract

The study is devoted to a comparative analysis of the application of different modes of using Apache Spark for the Word Count test dataset. An approach is proposed in which, based on the determination of the main configuration parameters of the Standalone and Hadoop Yarn modes and taking into account the limitations on the local deployment resource. A choice of configuration parameters and their changes in accordance with the default settings is proposed. The results are shown to substantiate its effectiveness based on the obtained quantitative estimates of the execution time.


Радіоелектроніка та молодь у XXI столітті. Т. 6 : Конференція "Інформаційні інтелектуальні системи": матеріали 28-го Міжнар. молодіж. форуму, 16–18 квітня 2024 р.

Pages

632-634

Published

December 12, 2024

Details about this monograph

ISBN-13 (15)

978-966-659-396-5