Що таке Big Data та принцип його роботи?

Спрощено робота з big data відбувається за наступною схемою: інформацію збирають з різних джерел дані поміщають на зберігання в бази і сховища дані обробляють і аналізують оброблені дані виводять за допомогою засобів візуалізації або використовують для машинного навчання.

Якщо казати простими словамиВеликі дані — більші та складніші набори даних, особливо з нових джерел даних. Розмір цих наборів даних настільки великий, що традиційні програми обробки не можуть з ними впоратися.

big data, [ˈbɪɡ ˈdeɪtə]) — позначення структурованих та неструктурованих даних величезних об'ємів та значного різноманіття, що ефективно обробляються горизонтально масштабованими програмними інструментами, що з'явилися наприкінці 2000-х років та альтернативних традиційним системам управління базами даних та …

Щосекундний особистий внесок кожної людини в середньому 1,7 мегабайта. Інші приклади соціальних джерел Big Data — статистики країн і міст, дані про переміщення людей, реєстрацію смертей та народжень та медичні записи. Великі дані також генеруються машинами, датчиками та «інтернетом речей».