danilchenko 20 дек 2012 в 10:49

Параллелим R

3 мин

12K

Data Mining*R*

Туториал

+20

Комментарии 11

Tonik 20 дек 2012 в 13:56

Спасибо за статью! С процессами понятно. А что делать если датасет выходит за доступную память?

danilchenko 20 дек 2012 в 14:03

Вот почему не стоит писать посты «через ночь» – забыл написать.

Я имел в виду простой выход: дать вычислениям больше памяти. А сделать это можно, например, организовав кластер из нескольких машин при помощи модулей snow и doSnow.

jaturken 20 дек 2012 в 17:01

Было бы интересно почитать про опыт интеграции R с другими платформами. Народ, я видел, как-то интегрируется с Hadoop. Вам не приходилось заниматься?

danilchenko 20 дек 2012 в 18:40

Нет, такого опыта у меня нет, хотя как раз сейчас я о подобной вещи задумываюсь

НЛО прилетело и опубликовало эту надпись здесь

jaturken 21 дек 2012 в 11:35

lmgtfy.com/?q=R

Zoberg 10 янв 2013 в 12:24

А как можно узнать количество доступных ядер процессора?

danilchenko 10 янв 2013 в 13:03

Непосредственно через R у меня не было нужды такие вещи узнавать.

Под linux можно так:

cat /proc/cpuinfo | grep ^processor |wc -l

Zoberg 10 янв 2013 в 19:33

Спасибо. В том же OpenMP есть специальная функция, которая это дело возвращает. Думал, что вполне может быть обертка над ней или чем-то похожим в R.

kablag 6 фев 2013 в 15:06

library(parallel)
detectCores(logical = FALSE)

Zoberg 11 фев 2013 в 17:52

Спасибо!

Зарегистрируйтесь на Хабре, чтобы оставить комментарий

Показать лучшие за всё время

Параллелим R

Комментарии 11

Публикации

Истории