Вопросы по теме 'ffbase'

удалить строки из пакета
С некоторых пор я использую пакет ff для работы с большими данными. Объект R, с которым я работал, имеет около 130 000 000 строк и 14 столбцов. В двух из этих столбцов, «Температура» и «Осадки», отсутствуют значения «NA», поэтому мне нужно удалить...
1217 просмотров
schedule 01.04.2023

агрегация с использованием функции ffdfdply в R
Я попробовал агрегировать большой набор данных, используя пакет ffbase, используя функцию ffdfdply в R. Допустим, у меня есть три переменные: Дата, Товар и продажи. Здесь я хочу агрегировать продажи по дате и элементу, используя функцию суммы. Не...
1659 просмотров
schedule 04.10.2022

Функции для создания и изменения больших данных в R с помощью пакета FF
Я новичок в R и пакете FF и пытаюсь лучше понять, как FF позволяет пользователям работать с большими наборами данных (> 4 ГБ). Я провел значительное количество времени в Интернете в поисках учебных пособий, но те, которые я мог найти, как правило,...
1115 просмотров
schedule 02.09.2023

Ошибка R ffbase save.ffdf (не были сохранены, т.к. не найдены)
У меня есть большая таблица данных (назовем ее DT) в R, которая занимает слишком много времени для сохранения в формате csv (было бы здорово иметь быструю запись, похожую на fread). Поэтому я конвертирую data.table в объект ffdf:...
393 просмотров
schedule 23.05.2022

R ffdfappend ошибка SIGBUS
У меня есть сценарий R, который использует пакеты ffbase и ff . В Windows скрипт работает нормально. В Linux (другая коробка, но больше оперативной памяти) он вылетает с ошибкой шины (SIGBUS). Информация о сеансе Windows (версия 6.1.7601):...
712 просмотров
schedule 02.08.2023

Чтение данных из нескольких файлов CSV в один объект ffdf
Можно ли загрузить данные сразу из нескольких файлов в ff фрейм данных (ffdf)? Допустим, у меня есть big_file_part1.csv big_file_part2.csv big_file_part3.csv Я знаю, что могу загрузить каждый файл csv в отдельный объект ffdf, а затем...
568 просмотров
schedule 05.01.2023

Функциональность Data.table setDT в пакетах ff/ffbase R
Рассчитать столбец условных средних, в ff/ffbase пакетах. Я ищу функциональность в пакетах ff/ffbase , которые позволяют мне манипулировать данными, как показано ниже с пакетом data.table : library(data.table) irisdf <-...
1212 просмотров
schedule 26.02.2023

Постепенно увеличивайте фрейм данных ffdf на диске
Из документации save.ffdf: Использование «save.ffdf» автоматически устанавливает «финализатор» векторов «ff» на «закрыть». Это означает, что данные будут сохранены на диске при удалении объекта или закрытии сеансов R. Данные можно удалить...
385 просмотров
schedule 22.06.2022