Вопросы по теме 'gsutil'
ограничение на возвращаемые файлы
Мне нужно сохранить несколько тысяч файлов в облачном хранилище Google. Есть ли ограничение на количество файлов, возвращаемых командой gsutil ls ?
Если я не ошибаюсь, сервис AWS S3 имеет ограничение в несколько тысяч записей, отображаемых при...
549 просмотров
schedule
30.01.2023
Команда gsutil rm с использованием STDIN
Я использую gsutil в среде Linux для управления файлами в GCS. Мне нравится использовать команду
gsutil -m cp -I gs://...
предшествует какая-либо другая команда для передачи STDIN в gsutil для загрузки файлов; при этом я могу вести...
747 просмотров
schedule
12.01.2024
gsutil cp: одновременное выполнение приводит к повреждению локального файла
У меня есть Perl-скрипт, который вызывает gsutil cp для копирования выбранного из GCS в локальную папку:
$cmd = "[bin-path]/gsutil cp -n gs://[gcs-file-path] [local-folder]";
$output = `$cmd 2>&1`;
Сценарий вызывается через HTTP и,...
989 просмотров
schedule
20.03.2024
Что произойдет с командой gsutil, если содержимое корзины DRA недоступно?
Я использую сегмент DRA (Durable Reduced Availability) и выполняю довольно часто команду gsutil rsync для загрузки / скачивания файлов в / из ведро.
Поскольку файл) может быть недоступен (из-за DRA), что именно произойдет во время gsutil...
349 просмотров
schedule
04.04.2023
Ошибка gsutil int при использовании rsync для больших файлов
Среда:
Windows 2012 R2 Server [сервер]
Python: 2.7.9
GSutil: 4.9
Запуск от имени системы (полный доступ ко всем файлам) в командной строке с повышенными привилегиями
Сегмент также называется [сервер]
Предпосылки: попытка резервного...
537 просмотров
schedule
25.05.2024
Сжатие и установка заголовков с истекающим сроком действия в Google Cloud Storage
Я использую следующие команды для загрузки файлов в облачное хранилище Google. Эти команды сжимают HTML, CSS и JS, а затем устанавливают заголовки с истекающим сроком действия на 6 месяцев для CSS, JS и изображений.
gsutil -m cp -z "html,css,js"...
266 просмотров
schedule
04.06.2023
Как исключить скрытые файлы и каталоги при использовании gsutil для rsync?
У меня есть блог Jekyll со структурой каталогов, которая содержит множество скрытых файлов и каталогов, таких как .DS_Store , .idea и .git . Он также имеет промежуточные артефакты сборки и сценарии, начинающиеся с _ , такие как _deploy.sh и...
1349 просмотров
schedule
02.01.2024
gsutil Недостаточно разрешений при попытке создать и смонтировать сегмент хранилища
Я пытаюсь создать и смонтировать корзину хранилища Google на экземпляре Ubuntu Linux, используя gsutil .
sudo gsutil mb -c STANDARD -l us-central1-a gs://test-bucket
Вот что я получаю:
Создание gs: // test-bucket / ......
654 просмотров
schedule
30.12.2021
Как скопировать / переместить все файлы и подпапки из текущего каталога в корзину Google Cloud Storage с помощью gsutil
Я использую gsutil, и мне нужно скопировать большое количество файлов / подкаталогов из каталога на сервере Windows в Google Cloud Storage Bucket.
Я проверил документацию, но почему-то не могу понять синтаксис - я пробую что-то в этом роде:...
1440 просмотров
schedule
13.04.2022
Как удалить Cloud SDK?
Сначала я установил автономный gsutil на Fedora 25, он отлично работал несколько месяцев. Затем я установил Cloud SDK, и с тех пор мои учетные данные Google Cloud не работают.
В конце концов, мне не нужен Cloud SDK. Я просто хочу снова...
1892 просмотров
schedule
18.03.2023
загрузить несколько изображений в облачную корзину с помощью gsutil
Полный новичок в отношении платформы Google CLoud и gsutil, извините, если этот вопрос настолько прост.
У меня есть 1000 изображений (все в формате jpg), хранящихся в той же локальной папке (Windows) на моем компьютере, которую я хочу загрузить в...
424 просмотров
schedule
12.07.2022
ascii 'кодек не может кодировать символ u' \ xe2
Я пытаюсь использовать Rync для копирования файлов с сервера в хранилище Google Cloud для общедоступного использования CDN. Мне удалось скопировать большинство файлов, однако один каталог не хочет копировать. Я думаю, что достигло предела файлов,...
389 просмотров
schedule
14.12.2023
Что использует gsutil под капотом?
Когда я передаю локальный файл в корзину Google Cloud Storage с помощью утилиты Google CLoud gsutil, какой протокол она использует? Зашифрованный туннель SSH?
415 просмотров
schedule
07.12.2022
Выполнение сценария оболочки через Node.js не будет работать с использованием команды gsutil для перемещения файлов в корзины Google Cloud Storage.
Я пытаюсь переместить каталог Ubuntu 17.10.1 в корзину облачного хранилища Google через приложение node js. Я решил выполнить сценарий оболочки с использованием модуля дочернего процесса. Скрипт выглядит так.
#!/bin/bash
echo START $1
declare...
1034 просмотров
schedule
13.01.2022
Команде mb требуется URL-адрес, указывающий ведро
Я пытаюсь использовать команду mb для создания корзины в Google Cloud Storage, но получаю
CommandException: The mb command requires a URL that specifies a bucket.
Странная часть заключается в том, что в то время как
gsutil mb...
1543 просмотров
schedule
29.02.2024
gsutil ConfigParser.ParsingError: файл содержит ошибки синтаксического анализа
Я работаю над скоростной полосой, используя подключаемый модуль лаборатории тестирования Fastlane Firebase от компании Pink-room которому требуется учетная запись службы gcloud для подключения к firebase и загрузки файлов в корзину.
Учетная...
803 просмотров
schedule
18.01.2024
Взимает ли gsutil rsync дополнительную плату за корзины Google Cloud Storage Coldline
Мне нужно сделать большую загрузку ~ 1,5 ТБ в холодную линию Google Cloud Storage. Я намеревался использовать команду gsutil rsync. Но у меня есть опасения. Приведет ли проверка контрольной суммы rsync к дополнительным расходам на каждый объект в...
316 просмотров
schedule
04.02.2023
Как загрузить большое количество файлов в хранилище Google?
Как правильно загрузить определенную папку с ПК с тысячами файлов и подпапок в Google Storage Bucket?
Я попытался с помощью команды gsutil:
gsutil -m cp -r myfolder gs://my-bucket
Но передача останавливается и загружается только несколько...
158 просмотров
schedule
15.08.2022
Загрузка файла из контейнера Docker в Google Cloud Storage
Я собираю конвейер CI/CD в GKE на основе это руководство от Google.
Все работает хорошо, за исключением того, что, поскольку это проект Django, мне также нужно запустить команду collectstatic и загрузить файлы в Google Storage.
В Dockerfile у...
1238 просмотров
schedule
07.03.2023
Как установить Google Cloud SDK на образ Windows Docker
Я пытаюсь создать образ Windows Docker, включающий утилиту gsutil.
Я попробовал варианты установки Google Cloud SDK на странице https://cloud.google.com/storage/docs/gsutil_install , но я не вижу сценария, который установит эту утилиту на машину...
75 просмотров
schedule
14.03.2023
