ДОСЛІДЖЕННЯ ВПЛИВУ НАЛАШТУВАНЬ КОНФІГУРАЦІЙНИХ ПАРАМЕТРІВ НА ПРОДУКТИВНІСТЬ РЕЖИМІВ РОЗГОРТАННЯ APACHE SPARK
Abstract
The study is devoted to a comparative analysis of the application of different modes of using Apache Spark for the Word Count test dataset. An approach is proposed in which, based on the determination of the main configuration parameters of the Standalone and Hadoop Yarn modes and taking into account the limitations on the local deployment resource. A choice of configuration parameters and their changes in accordance with the default settings is proposed. The results are shown to substantiate its effectiveness based on the obtained quantitative estimates of the execution time.

Радіоелектроніка та молодь у XXI столітті. Т. 6 : Конференція "Інформаційні інтелектуальні системи": матеріали 28-го Міжнар. молодіж. форуму, 16–18 квітня 2024 р.
Downloads
Pages
632-634
Published
December 12, 2024
Copyright (c) 2024 Press of the Kharkiv National University of Radioelectronics
Details about this monograph
ISBN-13 (15)
978-966-659-396-5