Проблеми великих даних: перспектива аналізу даних

Анотація: Великі дані стосуються великих об'ємних, зростаючих наборів даних, які є складними та мають кілька, автономних джерел. Зараз великі дані швидко розширюються у всіх наукових та інженерних областях з швидким розвитком мереж та збільшенням потужностей зберігання та збору даних. У цьому документі розглядаються великі характеристики та проблеми. Зокрема, ми обговорюємо велику різноманітність даних, інтеграцію та очищення великих даних, зменшення великих даних, індексацію та запит великих даних, а нарешті аналіз та видобуток великих даних. Далі ми зосереджуємось на проблемах у великому аналізі даних, таких як гетерогенність, масштаб, своєчасність, конфіденційність та співпраця людини; і представити кілька сценаріїв у реальному світі, де стикаються ці виклики.