Сколько данных может быть массовых данных?Сколько измерений может быть большой размерности? - PullRequest
Новая
       21

Сколько данных может быть массовых данных?Сколько измерений может быть большой размерности?

0 голосов
/ 22 июня 2011

Я собираюсь стать мастером сейчас, и направление исследований моего учителя - добыча данных для массовых данных большой размерности.

, но я все еще не могу себе представить, что такое массовые данные и сколькоРазмерность можно назвать большой размерностью.

ткс ~

1 Ответ

1 голос
/ 22 июня 2011

масса данных?Что ж, вы можете считать, что все запросы Google, рассматриваемые как поток, содержат массу данных.

Массовые размеры?Представьте себе инженера Google, который рассматривает несколько тем, таких как «пятиногие собаки».Он может думать, что каждый пользователь представляет измерение, и вычислять некоторые корреляционные вещи.И там много пользователей.

Теперь, вернемся к сути, нет четких определений массовых данных или больших измерений.Однако вы можете учесть, что:

  • Если у вас так много данных, что вы не можете загрузить все их в память (я говорю о жестком диске, а не только ОЗУ), это массовые данные
  • Если ваши алгоритмы начинают терпеть неудачу из-за проклятия размерности, это высокая размерность.1.000.000 размеров, безусловно, большой размер.Вы часто можете считать, что 1.000 - это тоже высокое измерение.
...