Вопросы по теме 'ffbase'
удалить строки из пакета
С некоторых пор я использую пакет ff для работы с большими данными. Объект R, с которым я работал, имеет около 130 000 000 строк и 14 столбцов. В двух из этих столбцов, «Температура» и «Осадки», отсутствуют значения «NA», поэтому мне нужно удалить...
1217 просмотров
schedule
01.04.2023
агрегация с использованием функции ffdfdply в R
Я попробовал агрегировать большой набор данных, используя пакет ffbase, используя функцию ffdfdply в R. Допустим, у меня есть три переменные: Дата, Товар и продажи. Здесь я хочу агрегировать продажи по дате и элементу, используя функцию суммы. Не...
1659 просмотров
schedule
04.10.2022
Функции для создания и изменения больших данных в R с помощью пакета FF
Я новичок в R и пакете FF и пытаюсь лучше понять, как FF позволяет пользователям работать с большими наборами данных (> 4 ГБ). Я провел значительное количество времени в Интернете в поисках учебных пособий, но те, которые я мог найти, как правило,...
1115 просмотров
schedule
02.09.2023
Ошибка R ffbase save.ffdf (не были сохранены, т.к. не найдены)
У меня есть большая таблица данных (назовем ее DT) в R, которая занимает слишком много времени для сохранения в формате csv (было бы здорово иметь быструю запись, похожую на fread). Поэтому я конвертирую data.table в объект ffdf:...
393 просмотров
schedule
23.05.2022
R ffdfappend ошибка SIGBUS
У меня есть сценарий R, который использует пакеты ffbase и ff . В Windows скрипт работает нормально. В Linux (другая коробка, но больше оперативной памяти) он вылетает с ошибкой шины (SIGBUS).
Информация о сеансе Windows (версия 6.1.7601):...
712 просмотров
schedule
02.08.2023
Чтение данных из нескольких файлов CSV в один объект ffdf
Можно ли загрузить данные сразу из нескольких файлов в ff фрейм данных (ffdf)? Допустим, у меня есть
big_file_part1.csv
big_file_part2.csv
big_file_part3.csv
Я знаю, что могу загрузить каждый файл csv в отдельный объект ffdf, а затем...
568 просмотров
schedule
05.01.2023
Функциональность Data.table setDT в пакетах ff/ffbase R
Рассчитать столбец условных средних, в ff/ffbase пакетах. Я ищу функциональность в пакетах ff/ffbase , которые позволяют мне манипулировать данными, как показано ниже с пакетом data.table :
library(data.table)
irisdf <-...
1212 просмотров
schedule
26.02.2023
Постепенно увеличивайте фрейм данных ffdf на диске
Из документации save.ffdf:
Использование «save.ffdf» автоматически устанавливает «финализатор» векторов «ff» на «закрыть». Это означает, что данные будут сохранены на диске при удалении объекта или закрытии сеансов R. Данные можно удалить...
385 просмотров
schedule
22.06.2022