Моделі обробки потоків текстових даних в рушії Apache Spark Structured Streaming
Вантажиться...
Дата
2022
Науковий керівник
Назва журналу
Номер ISSN
Назва тому
Видавець
КПІ ім. Ігоря Сікорського
Анотація
В даній статті розглядається рушій обробки потоків текстових даних Apache Spark
Structured Streaming, описується його принцип роботи та складові. Також розглядаються
моделі обробки потоків текстових даних, їх реалізації в рушії Spark Structured Streaming,
порівнюються методи мікро-пакетної та потокової обробки, та описуються переваги й
недоліки кожного з них.
Опис
Ключові слова
обробка потоків текстових даних, мікро-пакетна обробка, потокова обробка, Apache Spark, Apache Spark Structured Streaming, text data stream processing, micro-batch processing, stream processing
Бібліографічний опис
Федорович, І. А. Моделі обробки потоків текстових даних в рушії Apache Spark Structured Streaming / Федорович Ілля Андрійович, Олійник Юрій Олександрович // Інженерія програмного забезпечення і передові інформаційні технології (SoftTech-2022) : матеріали ІІ та ІІІ Всеукраїнських науково-практичних конференцій молодих вчених та студентів, присвячених 125-й річниці КПІ ім. Ігоря Сікорського (22–26 травня та 23-25 листопада 2022 р., Київ). – Київ : КПІ ім. Ігоря Сікорського, ІПІ ФІОТ, 2022. – С. 52-56. – Бібліогр.: 4 назви.