Big Data

Big Data — це підхід і набір технологій для роботи з обсягами даних, які надто великі, швидкі або різноманітні, щоб обробляти їх звичайними інструментами. Якщо коротко відповісти на запит «big data це» або «що таке big data»: це не просто «багато даних», а ціла екосистема методів їх збору, зберігання й аналізу.

Big Data традиційно описують через кілька характеристик — обсяг, швидкість надходження та різноманітність форматів даних. Саме поєднання цих трьох факторів і відрізняє Big Data від звичайної роботи з базами даних. Детальніше про це HBJ писав у матеріалі про Big Data аналітику.

Дані для Big Data надходять із десятків джерел одночасно: логи застосунків, транзакції, сенсори, соціальні мережі. Щоб з ними працювати, компанії використовують розподілені системи зберігання й обробки, які здатні паралельно аналізувати величезні масиви інформації на багатьох серверах одночасно.

Після збору дані очищають, структурують і аналізують за допомогою алгоритмів, статистичних методів чи моделей машинного навчання, щоб знайти закономірності, які неможливо помітити на маленьких вибірках.

• Дає змогу знаходити закономірності, непомітні на малих обсягах даних.

• Лежить в основі рекомендаційних систем, персоналізації та прогнозної аналітики.

• Допомагає бізнесу ухвалювати рішення на основі реальної поведінки мільйонів користувачів.

• Стає базою для більшості сучасних систем машинного навчання та штучного інтелекту.

Прикладами використання Big Data є персоналізовані рекомендації в стрімінгових сервісах, прогнозування попиту в рітейлі чи виявлення шахрайства у фінансових транзакціях.

Big Data — це підхід до роботи з величезними, швидкими й різноманітними масивами інформації, який дає бізнесу глибше розуміння користувачів і процесів. Без відповідних технологій такі обсяги даних просто неможливо було б проаналізувати.