Вопросы по теме 's3cmd'
s3cmd список содержимого - только имена файлов - perl один вкладыш?
В настоящее время я использую s3cmd ls s3://location/ > file.txt , чтобы получить список содержимого моего ведра s3 и сохранить в txt. Однако приведенное выше возвращает даты, пути файлов и имена файлов.
Например:
2011-10-18 08:52...
2673 просмотров
schedule
15.04.2023
s3cmd не получает файл jar distcp
Привет, ребята: я пытаюсь получить jar-файл s3 distcp через s3 в кластере EMR:
s3cmd get s3://eu-west-1.elasticmapreduce/libs/s3distcp/1.0.1/s3distcp.jar
Однако команда «получить» не работает:
ERROR: Skipping libs/s3distcp/: No such file...
1981 просмотров
schedule
08.07.2023
S3Cmd не работает как www-данные и работает как root
Я запускаю s3cmd в Ubuntu с правами root, и все работает нормально, без проблем. Но поскольку www-данные, которые использует мой cron, терпят неудачу, и я получаю это.
/var/backups/archives/files/file_name_27-01-2013_01:00:27.tar.gz ->...
489 просмотров
schedule
22.09.2022
S3cmd не работает в Ubuntu
Я установил s3cmd на свой компьютер с Ubuntu 11.10, и когда я пытаюсь загрузить некоторые данные с s3, он выдает эту ошибку, я также настроил s3cmd с ключами доступа, которые у меня есть (файл .s3cfg находится в домашней папке)...
685 просмотров
schedule
02.01.2023
Заархивируйте весь каталог на S3
Если у меня есть каталог с ~ 5000 небольших файлов на S3, есть ли способ легко заархивировать весь каталог и оставить полученный zip-файл на S3? Мне нужно сделать это без необходимости вручную обращаться к каждому файлу.
Спасибо!
35890 просмотров
schedule
28.06.2022
s3cmd инвалидация выбрать дистрибутив
Я пытаюсь использовать инструмент s3cmd, чтобы аннулировать мои файлы, кажется, что s3cmd автоматически выбирает дистрибутив для меня, но у меня есть другие дистрибутивы из того же сегмента, как я могу выбрать дистрибутив для аннулирования?
Я...
1035 просмотров
schedule
20.07.2023
s3cmd подсчитывает строки с помощью zcat и grep
Мне нужно подсчитать количество записей в заархивированном (.gz) файле из корзины S3, содержащих определенные символы. Как я мог это сделать?
В частности, мое ведро S3 — s3://mys3.com/ . Под этим есть тысячи ведер, подобных следующему:...
4705 просмотров
schedule
12.07.2023
Как я могу загрузить файл из корзины S3 с помощью wget?
Я могу отправить некоторый контент в корзину S3 с моими учетными данными через инструмент S3cmd с s3cmd, поместив файл содержимого S3://test_bucket/test_file
Вопрос в том, что мне нужно загрузить содержимое из этой корзины на другие компьютеры, на...
101374 просмотров
schedule
27.03.2024
Команда S3cmd mv не удаляет исходные файлы после копирования
У меня странное поведение от s3cmd. при запуске команды mv для нескольких файлов в папке (по одному) некоторые файлы копируются только в целевой каталог, но не удаляются из исходного каталога.
кто-нибудь испытывал что-то подобное?
Спасибо...
836 просмотров
schedule
23.01.2023
Исключение точечных файлов для синхронизации s3cmd
Как я могу исключить все точечные файлы в моем домашнем каталоге, а также эти точечные файлы во всех подкаталогах?
Я попытался добавить следующее выражение в свой файл исключения, но по какой-то причине оно не работает:
(^|/)\.[^/]*(/|$)...
4562 просмотров
schedule
26.01.2024
как добавить управление кешем в AWS S3?
Я переместил 20000 файлов на AWS S3 с помощью команды s3cmd. Теперь я хочу добавить кеш-контроль для всех изображений (.jpg).
Эти файлы находятся в (s3: // bucket-name / images /). Как я могу добавить кеш-контроль для всех изображений с помощью...
84943 просмотров
schedule
23.04.2022
Синхронизация s3cmd с бото в питоне
Я пытаюсь переместить некоторые сценарии резервного копирования с bash на python для лучшей обработки ошибок.
Я использую синхронизацию s3cmd для резервного копирования каталогов на s3. Я надеялся найти такой же простой способ сделать это...
1334 просмотров
schedule
02.08.2022
s3cmd: как использовать шифрование на стороне сервера?
Я пытаюсь зашифровать некоторые файлы на Amazon S3, используя шифрование на стороне сервера. По этой ссылке
http://s3tools.org/kb/item9.htm
Я должен только добавить этот флаг
--server-side-encryption
в команде put или sync, которую я...
1543 просмотров
schedule
20.03.2023
Перемещение нескольких файлов из одной корзины в другую в AWS возвращает ошибку: время ожидания истекло.
Я использую s3cmd для копирования более 5000 файлов из одного ведра в папку в другом ведре.
Нравится:
s3cmd mv --recursive -v s3://test.bucket/1111_stuff/ s3://actual.bucket/input/dataloader_input/
Тем не менее, это продолжает получать...
139 просмотров
schedule
16.07.2023
Как загрузить, сжать и загрузить на s3 на лету с помощью s3cmd
Я только что обнаружил, что в моей коробке осталось 5% для жесткого диска, и у меня есть почти 250 ГБ bin-файла mysql, который я хочу отправить на s3. Мы перешли с mysql на NoSQL и в настоящее время не используем mysql. Однако я хотел бы сохранить...
2052 просмотров
schedule
27.05.2022
Синхронизируйте с S3 с помощью s3cmd, но не загружайте повторно файлы, которые только изменили имя
Я синхронизирую кучу файлов между своим компьютером и Amazon S3. Скажем, пара файлов меняет имя, но их содержимое остается прежним. Должен ли я удалить локальный файл с помощью s3cmd, а затем повторно загрузить «новый» файл только потому, что у него...
926 просмотров
schedule
14.06.2022
Перемещение файлов в корзине amazon s3
Я загрузил файлы на ведро s3. Но по моей вине s3cmd загружал файлы на s3://backups/files/bkup14 вместо s3://backups/bkup14. Теперь, чтобы переместить все файлы из s3://backups/files/bkup14 в s3://backups/bkup14, я попробовал следующую команду:...
2782 просмотров
schedule
04.05.2022
s3cmd для установки правильного типа контента для изображения/jpeg
Я загрузил несколько каталогов, содержащих изображения. Как правильно изменить тип содержимого на «image/jpeg» без повторной загрузки изображений?
Я старался:
s3cmd modify s3://ccc-public/catalog/cropped/EP01L.jpg...
5628 просмотров
schedule
16.07.2022
s3cmd pipe mongodb 3.0.2 Ошибка аутентификации SASL
Кто-нибудь испытывает проблемы с s3cmd и mongoimport после обновления до mongodb 3.0.2? Я получаю сообщение об ошибке SCRAM-SHA1/SASL, но не знаю, как это исправить? Соединение от и к s3 по-прежнему не повреждено и работает правильно.
До...
4178 просмотров
schedule
23.07.2023
Зашифровать файл с помощью 256-битного ключа AES из инструмента s3cmd
У меня есть ведро с некоторым количеством незашифрованных файлов, мне нужно зашифровать их с помощью 256-битного ключа AES. Я уже написал java-код для шифрования этих файлов, и он работает нормально. Мне интересно, поддерживает ли предоставленный...
522 просмотров
schedule
20.06.2023
