Вопросы по теме 'snowfall'

Использование снега (и снегопада) с AWS для параллельной обработки в R
Что касается моего более раннего подобного вопроса SO , я попытался использовать snow/ снегопад на AWS для параллельных вычислений. Я сделал следующее: В функции sfInit() я указал общедоступный параметр DNS для socketHosts вот так...
2042 просмотров

Коммуникация параллельных процессов: какие у меня варианты?
Я пытаюсь немного углубиться в распараллеливание подпрограмм R. Какие у меня варианты в отношении общения кучи "рабочих" процессов по поводу связь между соответствующими работниками ? связь воркеров с процессом master ? AFAIU, не...
927 просмотров

Как рассчитать количество вхождений в минуту для большого набора данных
У меня есть набор данных с 500 тыс. встреч продолжительностью от 5 до 60 минут. tdata <- structure(list(Start = structure(c(1325493000, 1325493600, 1325494200, 1325494800, 1325494800, 1325495400, 1325495400, 1325496000, 1325496000, 1325496600,...
1351 просмотров
schedule 11.10.2022

R: создание кластера в doParallel / снегопад зависает
У меня есть два сервера в локальной сети со свежими установками минимальной версии Centos 6.4 и R 3.0.1. На обоих компьютерах установлены пакеты doParallel, snow и snowfall. Серверы могут нормально подключаться друг к другу по ssh. Когда я...
3811 просмотров

sfApply и sfClusterApplyLB Snowfall работают медленнее, чем обычный цикл или sapply
Когда я применяю этот код в R, цикл и sapply работают быстрее, чем функции снегопада. Что я делаю неправильно? (используя виндовс 8) library(snowfall) a<- 2 sfInit(parallel = TRUE, cpus = 4) wrapper <- function(x){((x*a)^2)/3}...
801 просмотров
schedule 31.05.2024

Включите все ЦП для всех узлов в кластере: пакет снег / снегопад
Я работаю над кластером и использую пакет snowfall для создания кластера сокетов на 5 узлах по 40 процессоров в каждом с помощью следующей команды: > sfInit(parallel=TRUE, cpus = 200, type="SOCK", socketHosts=c("host1", "host2", "host3",...
1451 просмотров
schedule 04.08.2022

Ускорение ggplot2-графика для анимированных графиков в большом наборе данных
Я построил анимированный график, используя ggplot2 и magick из большого набора данных, содержащего десятки тысяч записей. Основываясь на моем сообщении Как управлять параллельной обработкой с помощью анимированный ggplot2-plot? , меня сейчас...
224 просмотров