zzeng3 дек 2013 в 04:53

Gnuplot супротив 2MASS

8 мин

8.5K

Data Mining * Геоинформационные сервисы *

+10

Комментарии 7

alexeykuzmin0 3 дек 2013 в 05:13

Извините, но где здесь BigData?
Покупаем сервак с десятками ядер и сотнями гигабайт RAM, создаем виртуальный диск в оперативной памяти, распараллеливаем все запросы. Вот было бы 100 ТБ данных — тогда да

zzeng 3 дек 2013 в 05:16

Попробуйте создать пространственный индекс на полмиллиарда объектов.

zzeng 3 дек 2013 в 05:17

Без сервака с десятками ядер и сотнями Гб RAM

alexeykuzmin0 3 дек 2013 в 05:22

Мыло уместно в бане. Используется обычный комп, если не нравится скорость работы — покупается сервак. А вот если на серваке нельзя выполнить расчеты или это занимает слишком много времени — тогда это BigData и нужен кластер.

zzeng 3 дек 2013 в 05:25

А у меня другой подход, мне интересно выжать из железа максимум.
Если я могу решить такую задачу на завалящем десктопе, то и на серваке раздвигаются границы допустимого.

alexeykuzmin0 3 дек 2013 в 05:26

Подход хороший, просто BigData — это другое

zzeng 3 дек 2013 в 05:27

Ну, в 2009 году эти data были достаточно big.

Зарегистрируйтесь на Хабре, чтобы оставить комментарий