Публикации по теме 'data-compression'


Fuzz-тестирование алгоритма Snappy Compression
Использование American Fuzzy Lop в библиотеке сжатия Snappy не обнаружило новых ошибок и сообщило только о высоком использовании памяти, связанном с предварительным выделением выходного буфера. Пользователи Snappy должны знать об этом предварительном распределении и проверять несжатый размер перед вызовом snappy::Uncompress В реализации Snappy, отличной от C++, были обнаружены ошибки, о которых сообщали инструменты, производные от AFL. Быстрый Snappy — это библиотека сжатия (..

Сжатие данных без потерь и… #DeepLearning?
Давным-давно, на заре теории информации, Клод Шеннон показал, что существует нижняя граница объема, который можно — без потерь — сжимать данные. С тех пор было придумано множество систем «кодирования», чтобы достичь этого предела. Все эти системы (примерно!!) сводятся к следующему: ° Поиск шаблонов в данных ° Ассоциирование символа с этими шаблонами ° Передача символа вместо шаблона Хитрость заключается в выявлении закономерностей. Например, если у нас с вами одна и та же книга, я..

Вопросы по теме 'data-compression'

Как можно вычислить оптимальные параметры схемы кодирования «старт-шаг-стоп»?
Код start-step-stop — это метод сжатия данных, который используется для сжатия относительно небольших чисел. Код работает следующим образом: он имеет три параметра: start, step и stop. Start определяет количество битов, используемых для вычисления...
655 просмотров
schedule 02.04.2023

Преобразование изображений с высоким разрешением в изображения с низким разрешением
Я делаю веб-проект на медиа-менеджере. Я загружаю изображения с высоким разрешением, и мне нужно преобразовать эти изображения в низкое разрешение, чтобы полученное изображение было сжато до меньшего размера. Как это возможно с помощью Java?...
3510 просмотров
schedule 10.01.2023

Преобразование строки из 1 и 0 в двоичное значение, а затем сжатие, PHP
Например, у меня есть строка: «10001000101010001» в PHP. Я сжимаю ее с помощью gzcompress, но она сжимает эквивалент ASCII. Я хотел бы сжать строку, как если бы это были двоичные данные, а не двоичный эквивалент ASCII. В основном у меня есть 2...
1048 просмотров
schedule 19.08.2022

GZIPOutputStream неправильно сжимает строку для ответа HTTP
Я пишу простой HTTP-сервер Java, который отвечает данными JSON. Я пытаюсь сжать данные с помощью GZip перед отправкой, но обычно он отправляет обратно сжатые данные, что приводит к ошибке в браузере. Например, в Firefox он говорит: Ошибка...
3957 просмотров

Сжатие больших файлов с помощью python
Я хочу сжать большие текстовые файлы с помощью python (я говорю о файлах> 20Gb). Я не являюсь экспертом, поэтому я попытался собрать информацию, которую нашел, и, похоже, работает следующее: import bz2 with open('bigInputfile.txt', 'rb') as...
8541 просмотров
schedule 29.01.2023

Как лучше всего сжать список похожих, но не идентичных строк?
Скажем, у меня есть несколько строк, которые очень похожи, но не абсолютно идентичны. Они могут более или менее различаться, но сходство видно невооруженным глазом. Все длины равны, каждая составляет 256 байт. Общее количество строк меньше 2 ^...
615 просмотров

нужен совместимый с MySQL сжатие () / распаковка () для Java
Я думаю применить функцию MySql compress() к полю, которое является varchar и имеет тенденцию работать от нескольких тысяч символов до более миллиона на столбец. Текст почти нормальный английский, поэтому я получаю сжатие 8 к 1 или даже лучше....
1350 просмотров
schedule 10.02.2023

Большое сжатие строки запроса
Возможный дубликат: Как сжать/распаковать длинную строку запроса в PHP? У меня есть огромное количество данных внутри моей строки подзапроса для отслеживания потребностей. Я теряю много своих данных из-за того, что слишком большой...
114 просмотров

ДПФ прямоугольной формы в PNg
Итак, немного подробнее: я начинаю писать свою «дипломную работу на степень бакалавра», и это будет что-то, связанное со сжатием изображений. Мне интересно, знаете ли вы о каких-либо попытках использовать прямоугольный ряд Фурье (преобразование) в...
200 просмотров
schedule 17.01.2023

ПОДХОДИТ для создания сжатых данных изображения
Я пытаюсь записать данные в формате FITS , используя сжатие. Вот что я пробовал: #include <vector> #include "fitsio.h" #define DIM 100 int main(int argc, char *argv[]) { fitsfile *fptr; /* pointer to the FITS file, defined in...
198 просмотров

Android для CodeIgniter, как получить данные чанка
В настоящее время используется: Android: API-уровень 19 CodeIgniter EasyPHP Моя проблема: У меня есть данные JSON. Что я хочу сделать, так это GZIP и отправить их в мой веб-API, который запускается codeigniter и фрагментирует его...
227 просмотров
schedule 28.10.2022

Копия Redshift создает различные кодировки сжатия из анализа
Я заметил, что AWS Redshift рекомендует кодировки сжатия столбцов, отличные от тех, которые он автоматически создает при загрузке данных (через КОПИРОВАНИЕ) в пустую таблицу. Например, я создал таблицу и загрузил данные из S3 следующим образом:...
641 просмотров

Хаффман против ANS
У меня есть собственная реализация JPEG. Он использовал только Хаффмана, пока я не обнаружил ANS, который я также реализовал. Мое тестовое изображение, сжатое этими двумя алгоритмами, дало следующие коэффициенты сжатия: Хаффман: 10,48x Ответ:...
276 просмотров

Может ли полное заполнение всех байтов 8 значащими битами данных (хорошим) способом уменьшить размер файла?
Эта идея застряла в моей голове уже несколько месяцев. Когда я ищу в Интернете методы сжатия данных, я обнаруживаю, что все говорят об удалении байтов, которые остаются незамеченными людьми, или поиске повторяющихся шаблонов и перекодировании битов и...
90 просмотров
schedule 04.10.2022