"В чём суть проблемы?В том, что нужно перестроить мышление. Обычные данные легко анализировать, пользуясь человеческой логикой. Грубо говоря, в самом начале вы примерно представляете, что с чем коррелирует и что вы получите. В больших данных это не так. Мы дошли до той стадии практического применения данных, когда многообразие уже подкидывает сюрпризы. В последних разработках мы не знали даже примерного сценария взаимовлияния данных и не могли сознательно установить связи между факторами. Однако наш кластер раз за разом нагревал окружающую реальность на пару градусов и выдавал неожиданные и часто парадоксальные результаты. Часть из них можно было использовать."https://habrahabr.ru/article/268755/
Данные, которые не поддаются логическому анализу человекомhttps://habrahabr.ru/article/268755/Данные, которые не поддаются анализу – они поддаются моделированию.