ДОСЛІДЖЕННЯ ВПЛИВУ НАЛАШТУВАНЬ КОНФІГУРАЦІЙНИХ ПАРАМЕТРІВ НА ПРОДУКТИВНІСТЬ РЕЖИМІВ РОЗГОРТАННЯ APACHE SPARK

Автори

С. Мінухін
Харківський національний університет радіоелектроніки
Н. Коптілов
Харківський національний економічний університет ім. С. Кузнеця

Анотація

The study is devoted to a comparative analysis of the application of different modes of using Apache Spark for the Word Count test dataset. An approach is proposed in which, based on the determination of the main configuration parameters of the Standalone and Hadoop Yarn modes and taking into account the limitations on the local deployment resource. A choice of configuration parameters and their changes in accordance with the default settings is proposed. The results are shown to substantiate its effectiveness based on the obtained quantitative estimates of the execution time.


Радіоелектроніка та молодь у XXI столітті. Т. 6 : Конференція "Інформаційні інтелектуальні системи": матеріали 28-го Міжнар. молодіж. форуму, 16–18 квітня 2024 р.

##submission.downloads##

Сторінки

632-634

Опубліковано

грудня 12, 2024

Деталі про цю монографію

ISBN-13 (15)

978-966-659-396-5