ВЫБЕРИТЕ прогноз («resnet», изображение) ИЗ набора данных Было много волнений по поводу современного стека данных в коробке с DuckDB, и это правильно. Что, если бы современный стек данных также включал неструктурированные данные и машинное обучение? Что, если бы классифицировать изображения и обнаруживать объекты было бы так же просто, как считать простое значение? Поскольку я пишу этот пост, вы, наверное, уже догадались об ответе: да, можете. Это стало возможным благодаря..

Инжиниринг данных — это быстрорастущая область, и инструменты и технологии, которые используют инженеры данных, постоянно развиваются. В последние годы растет интерес к использованию Rust, DuckDB и Arrow для задач обработки данных. Rust — это современный язык программирования, известный своей скоростью, безопасностью и эффективностью использования памяти. Это хороший выбор для задач инженерии данных, поскольку его можно использовать для написания высокопроизводительного кода,..

Если вы читаете эту статью, не волнуйтесь, вы не одиноки, кто считает, что apache arrow — это альтернатива apache parquet. Даже у меня сложилось такое первое впечатление, когда я впервые услышал об apache arrow. Но на самом деле они оба дополняют друг друга. Parquet  – это формат двоичных файлов, ориентированный на столбцы, для эффективного хранения файлов на диске с использованием передовых методов сжатия и кодирования, таких как кодирование длин серий, кодирование по словарю,..