Как загрузить большой объект S3 из командной строки намного быстрее, чем s3cmd
С помощью команды s3cmd вы можете загружать файлы из S3 следующим образом:
s3cmd get s3://my.private.bucket/some/location/hugefile.dat
Но это может занять довольно много времени, если хранимые файлы действительно большие. Существуют ли альтернативные решения командной строки для приведенного выше примера, которые значительно ускоряют этот процесс?
1 ответ
s4cmd утверждает, что поддерживает многопоточные операции.
Это утилита командной строки для доступа к Amazon S3, созданная на основе s3cmd.
Он поддерживает обычные команды, которые вы можете ожидать для извлечения и хранения файлов в S3: ls, put, get, cp, mv, sync, del, du.