Вопросы по теме 'gsutil'
Как я могу использовать gsutil с несколькими учетными записями?
Я часто использую Google Cloud Storage как минимум с двумя учетными записями: [email protected] и [email protected]. Я использовал gsutil config для создания .boto файлов для обеих учетных записей, которые я переименовал в personal.boto и...
15213 просмотров
schedule
07.08.2023
Ограничение количества файлов для параллельного копирования
Я запускаю команду gsutil cp параллельно (с параметром -m) в каталоге с 25 файлами json по 4 ГБ (которые я также сжимаю с параметром -z).
gsutil -m cp -z json -R dir_with_4g_chunks gs://my_bucket/
Когда я запускаю его, он выводит на терминал,...
4831 просмотров
schedule
11.07.2023
Ошибка импорта gsutil CONFIG_REQUIRED?
Я попытался установить и запустить gsutil и получаю следующую ошибку:
Traceback (most recent call last):
File "/Users/groovebug/gsutil/gsutil", line 88, in <module>
sys.exit(gslib.__main__.main())
File...
670 просмотров
schedule
13.09.2022
Как сделать gsutil cp -R, игнорируя такие файлы, как .git, .gitignore?
Я пытаюсь автоматизировать процесс синхронизации своих веб-ресурсов с Google Cloud Storage. В основном мне нужно скопировать все в моем каталоге разработки в облако. Однако мне нужно игнорировать каталог .git и некоторые другие не относящиеся к...
6255 просмотров
schedule
07.06.2023
Как получить токен обновления для работы командной строки gsutil?
Я использую gsutil для передачи файлов с компьютера с Windows в Google Cloud Storage.
Я не использовал его более 6 месяцев, и теперь, когда я пробую его, я получаю:
Ошибка: invalid_grant
Изучив это, я подозреваю, что токен доступа больше не...
3523 просмотров
schedule
16.09.2022
gsutil зависает без копирования каких-либо данных
Я пытаюсь загрузить файлы из экземпляра вычислительного движка (debian) в облачное хранилище. в какой-то момент gsutil полностью перестал работать. При запуске с флагом -D я вижу эти ответы:
ответ: 'HTTP/1.1 400 Bad Request\r\n'header:...
1158 просмотров
schedule
13.04.2024
Команда gsutil make bucket [gsutil mb] не работает
Я пытаюсь создать ведро с помощью команды gsutil mb:
gsutil mb -c DRA -l US-CENTRAL1 gs://some-bucket-to-my-gs
Но я получаю это сообщение об ошибке:
Creating gs://some-bucket-to-my-gs/...
BadRequestException: 400 Invalid argument.
Я...
10247 просмотров
schedule
06.10.2022
Ошибка размещения подписанного URL-адреса GSUTIL в Google Cloud Storage
Я бы хотел, чтобы пользователи сайта могли загружать файлы на google cloud storage без использования ресурсов серверов веб-приложений, чтобы подписанные URL-адреса казались подходящим вариантом.
Когда пользователь выбирает файл для загрузки,...
1095 просмотров
schedule
16.03.2024
Инструмент Android gsutil не работает
Я хочу экспортировать оценки и отзывы из своего приложения для Android.
Я следовал инструкциям gsutil и смог установить gsutil на свой компьютер, а затем попытался экспортировать свои оценки. лайк
gsutil cp -r...
6730 просмотров
schedule
14.05.2023
Linux: gsutil не работает в cron
Я пытаюсь загрузить файлы в Google Cloud Storage с помощью cron в Linux, но это не удается. Я также установил путь и конфигурацию в моем файле сценария как:
PATH=/bin/gsutil/
export BOTO_CONFIG="/home/ashu/.boto"
# rest of script
Но все...
2946 просмотров
schedule
19.10.2022
Как правильно запустить gsutil из crontab?
Это моя запись в /etc/crontab, CentOS 6.6:
0 0 */1 * * fredrik /home/fredrik/google-cloud-sdk/bin/gsutil -d -m rsync -r -C [src] [dst] &> [log]
И я получаю эту ошибку: OSError: [Errno 13] Permission denied: '/.config'
Команда...
5911 просмотров
schedule
20.11.2022
GSUtil rsync выдает 400 неповторяемых исключений в сегменте S3
Я использую gsutil rsync, копирую из s3 в gs, и после того, как gsutil частично прошел через ведро, я получаю следующую ошибку:
Обнаружено неповторяемое исключение при выводе списка s3: // [bucket] /: BadRequestException: 400 Нет CommandException:...
1575 просмотров
schedule
04.05.2023
подпроцесс python не будет хорошо работать с командами копирования/перемещения gsutil
В Python я использую подпроцесс для вызова команд копирования и перемещения gsutil, но в настоящее время я не могу выбрать несколько расширений.
Та же команда gsutil работает в терминале, но не в питоне:
cmd_gsutil = "sudo gsutil -m mv...
951 просмотров
schedule
03.02.2023
Загрузить общедоступный каталог в Google Cloud Storage
Используя эту команду из SSH, я могу загрузить целую папку в Google Cloud Storage:
gsutil cp -R folder_big gs://bucket_name
Это файлы внутри папки:
Я не хочу нажимать на каждый файл отдельно, чтобы сделать его общедоступным.
Как...
1060 просмотров
schedule
28.02.2023
Использование grep для удаления определенных объектов в GCS с помощью gsutil -rm
У меня есть ведро со многими объектами, и я могу успешно использовать grep, чтобы брать определенные объекты и выводить их в текстовый файл. Я хочу использовать gsutil -rm и построчно читать текстовый файл и удалять соответствующий объект в gcs, но...
1034 просмотров
schedule
28.06.2023
gsutil для анонимного копирования с s3?
Цель состоит в том, чтобы gsutil анонимно копировал с s3:// на gs://.
Boto поддерживает анонимные подключения s3, но я не уверен, как заставить gsutil использовать метод анонимного подключения.
Я добавил это в ~/.boto безуспешно. Он...
258 просмотров
schedule
01.03.2023
Ошибка аутентификации служебного аккаунта с gsutil для сегмента CS DCM (проект консоли API, принадлежащий Google)
Я провел обширное исследование, но не могу найти решения.
Как я могу включить аутентификацию сервисного аккаунта для проекта, который связан с частным Google Bucket для данных Double Click Manager? (дополнительную информацию о текущей настройке...
76 просмотров
schedule
06.03.2024
заголовки ответов для облачного хранилища Google
Используя Google Cloud Storage, я не получаю заголовок CORS в ответ для одного файла, но все остальные файлы содержат его.
Я загрузил папку с файлами SVG для обслуживания из Google Cloud Storage. Я положил их в новое ведро. Я изменил разрешения,...
718 просмотров
schedule
26.06.2023
Как установить управление кешем по умолчанию для новых изображений, загружаемых в корзины в хранилище Google
Я знаю, что вы можете запустить команду при загрузке, чтобы установить кеш-контроль загружаемого изображения.
gsutil -h "Cache-Control:public,max-age=2628000" cp -a public-read \\
-r html gs://bucket
Но я использую carrierwave в рельсах и...
323 просмотров
schedule
16.06.2022
Как запланировать задание на выполнение скрипта Python в облаке для загрузки данных в bigquery?
Я пытаюсь настроить задание / процесс расписания в облаке для загрузки данных CSV в Bigquery из ведер Google с помощью скрипта Python. Мне удалось удержать код Python, чтобы сделать это, но я не уверен, где мне нужно сохранить этот код, чтобы эту...
4412 просмотров
schedule
10.06.2024
