Наведено аналіз моделей, методів і технологій виявлення аномалій у даних. Зроблено висновок, що на підставі проведеного аналізу рішення проблеми виявлення аномалій у даних слід розглядати як комплексну технологію, яка складається з формування та застосування математичних моделей у поєднанні з дослідженням підходів до обробки даних. Проаналізовано сучасний стан технологій обробки потоків великих даних і відображено особливості найбільш поширених і прогресивних із них, напр. Apache Hadoop, Apache Spark, Apache Cassandra, Apache Kafka, Apache Storm і Apache Beam. Окрім цього, увагу приділено інфраструктурі, у якій створені моделі програмного забезпечення можуть бути розгорнуті та використані, беручи до уваги високий характер даних у режимі реального часу. Запропоновано сформувати інфраструктуру для виявлення аномалій у даних як прикладний приклад хмарної інфраструктури обробки великих даних. Продемонстровано розроблену модель інфраструктури для виявлення аномалій у потокових даних реального часу, яка базується на експертному методі формування вимог до програмної складової, вибору алгоритму виявлення аномалій, вибору інструментів та вдосконалення алгоритму. Виділені інструменти виявлення аномалій надають можливість створити безпечне рішення для виявлення аномалій у реальному часі за допомогою Dataflow, BigQuery ML і Cloud DLP. Наведено прикладну реалізацію виявлення аномалій у режимі реального часу за допомогою GCP та Apache Beam - аналіз потоку даних програмних журналів в інформаційній системі та виявлення серед них шахрайських, що допоможе підвищити кібербезпеку системи. Продемонстровано можливі вдосконалення базової моделі, які можуть допомогти її прискорити.

 Наукова періодика України 

---

Додаткова інформація про автора(ів) публікації:
(cписок формується автоматично, до списку можуть бути включені персоналії з подібними іменами або однофамільці)

• Хлевна Юлія Леонідівна (технічні науки)

  Якщо, ви не знайшли інформацію про автора(ів) публікації, маєте бажання виправити або відобразити більш докладну інформацію про науковців України запрошуємо заповнити "Анкету науковця"