Технології Big Data аналітики в розподілених системах обчислень

Автор(и)

  • Л. М. Олещенко Національний технічний університет України «КПІ імені Ігоря Сікорського»

DOI:

https://doi.org/10.18372/2073-4751.4.12821

Ключові слова:

Big Data, програмне забезпечення, розподілені обчислення, ІоT, Pandas, Python, статистична обробка даних, бази даних, ЦОД, Kafka, Cassandra, MapReduce, Hadoop, Spark

Анотація

Проаналізовані існуючі технології та програмні засоби Big Data аналітики, виділено їхпереваги та недоліки. Розглянуто інфраструктуру та статистичні методи аналізу Big Data.Проаналізовані технології розподіленої обробки, проблеми іденфікації та зберігання Big Data. На основі проведеного аналізу виділено основні проблеми Big Data аналітики, які у подальшому потребують вирішення

Біографія автора

Л. М. Олещенко, Національний технічний університет України «КПІ імені Ігоря Сікорського»

к.т.н.

Посилання

BIG DATA: Інноваційні можливості підвищення прибутковості агробізнесу // [Електронний ресурс] – Режим доступу: http://www.agrobusiness.com.ua/ideii-i-trendy/8383-bigdata-innovatsiini-ozhlyvostipidvyschennia-prybutkovostiagrobiznesu.

html

Web Scraping Tools to Extract Online Data // [Електронний ресурс] – Режим доступу:https://www.hongkiat.com/blog/webscraping-

tools/

David Haertzen. ETL Tools // The Analytical Puzzle: Profitable Data Warehousing, Business Intelligence and Analytics. – Technics Publications, 2012. –

p.

ETL or ELT and the Use Case // [Електронний ресурс] – Режим доступу: https://www.linkedin.com/pulse/etl-elt-usecase-mich-talebzadeh-ph-d-/

What Is Apache Hadoop? // [Електронний ресурс] – Режим доступу: http://hadoop.apache.org/

Apache Kafka. А distributed streaming platform // [Електронний ресурс] – Режим доступу: https://kafka.apache.org/

Apache Cassandra // [Електронний ресурс] – Режим доступу: http://cassandra.apache.org/

Apache Spark. А fast and general engine for large-scale data processing // [Електронний ресурс] – Режим доступу: https://spark.apache.org/

##submission.downloads##

Як цитувати

Олещенко, Л. М. (2017). Технології Big Data аналітики в розподілених системах обчислень. Проблеми iнформатизацiї та управлiння, 4(60), 57–63. https://doi.org/10.18372/2073-4751.4.12821

Номер

Том 4 № 60 (2017)

Розділ

Статті

Ліцензія

Науковий журнал дотримується принципів відкритого доступу (Open Access) та забезпечує вільний, негайний і постійний доступ до всіх опублікованих матеріалів без фінансових, технічних або юридичних обмежень для читачів.

Усі статті публікуються у відкритому доступі відповідно до ліцензії Creative Commons Attribution 4.0 International (CC BY 4.0).

Авторські права

Автори, які публікують свої роботи в журналі:

  • зберігають за собою авторські права на свої публікації;

  • надають журналу право на перше опублікування статті;

  • погоджуються на поширення матеріалів за ліцензією CC BY 4.0;

  • мають право повторно використовувати, архівувати та поширювати свої роботи (у тому числі в інституційних та тематичних репозитаріях) за умови посилання на первинну публікацію в журналі.