Вопросы по теме 'snowfall'
Использование снега (и снегопада) с AWS для параллельной обработки в R
Что касается моего более раннего подобного вопроса SO , я попытался использовать snow/ снегопад на AWS для параллельных вычислений.
Я сделал следующее:
В функции sfInit() я указал общедоступный параметр DNS для socketHosts вот так...
2042 просмотров
schedule
06.04.2023
Коммуникация параллельных процессов: какие у меня варианты?
Я пытаюсь немного углубиться в распараллеливание подпрограмм R.
Какие у меня варианты в отношении общения кучи "рабочих" процессов по поводу
связь между соответствующими работниками ?
связь воркеров с процессом master ?
AFAIU, не...
927 просмотров
schedule
21.06.2023
Как рассчитать количество вхождений в минуту для большого набора данных
У меня есть набор данных с 500 тыс. встреч продолжительностью от 5 до 60 минут.
tdata <- structure(list(Start = structure(c(1325493000, 1325493600, 1325494200, 1325494800, 1325494800, 1325495400, 1325495400, 1325496000, 1325496000, 1325496600,...
1351 просмотров
schedule
11.10.2022
R: создание кластера в doParallel / снегопад зависает
У меня есть два сервера в локальной сети со свежими установками минимальной версии Centos 6.4 и R 3.0.1. На обоих компьютерах установлены пакеты doParallel, snow и snowfall.
Серверы могут нормально подключаться друг к другу по ssh.
Когда я...
3811 просмотров
schedule
07.08.2023
sfApply и sfClusterApplyLB Snowfall работают медленнее, чем обычный цикл или sapply
Когда я применяю этот код в R, цикл и sapply работают быстрее, чем функции снегопада. Что я делаю неправильно? (используя виндовс 8)
library(snowfall)
a<- 2
sfInit(parallel = TRUE, cpus = 4)
wrapper <- function(x){((x*a)^2)/3}...
801 просмотров
schedule
31.05.2024
Включите все ЦП для всех узлов в кластере: пакет снег / снегопад
Я работаю над кластером и использую пакет snowfall для создания кластера сокетов на 5 узлах по 40 процессоров в каждом с помощью следующей команды:
> sfInit(parallel=TRUE, cpus = 200, type="SOCK", socketHosts=c("host1", "host2", "host3",...
1451 просмотров
schedule
04.08.2022
Ускорение ggplot2-графика для анимированных графиков в большом наборе данных
Я построил анимированный график, используя ggplot2 и magick из большого набора данных, содержащего десятки тысяч записей.
Основываясь на моем сообщении Как управлять параллельной обработкой с помощью анимированный ggplot2-plot? , меня сейчас...
224 просмотров
schedule
17.10.2022