Розробка бібліотеки для оптимізації обробки великих даних на платформі Apache Spark мовою Java

Abstract

UA : Робота викладена на 36 сторінках друкованого тексту, містить 7 рисунків, 9 джерел, 1 додаток. Об’єкт дослідження – способи обробки даних, двигуни обробки даних, Apache Spark. Мета роботи: дослідження сучасних способів обробки даних, дослідження двигунів обробки даних, розробка бібліотеки для оптимізації обробки даних, дослідження Apache Spark. У кваліфікаційній роботі показано виклики сучасних задач обробки даних. Проаналізовано засоби пришвидшення обробки даних. Розроблено бібліотеку оптимізації обробки великих даних на платформі Apache Spark мовою Java.EN : The work is presented on 36 pages of printed text, 7 figures, 9 references, 1 supplement. Object of the study: data processing methods, data processing engines, Apache Spark. Aim of the study: research of modern data processing methods, research of data processing engines, development of a library for optimizing data processing, research of Apache Spark. The qualification work demonstrates the challenges of modern data processing tasks. The means of accelerating data processing have been analyzed. A library for optimizing big data processing on the Apache Spark platform using Java has been developed.