Como transferir arquivos de S3 para S3

Copiar alguns objetos não é um problema tão grande, então você deve ser capaz de fazer isso com o AWS S3 Console e se você transferir dentro da mesma conta AWS.

O problema fica mais difícil quando você precisa copiar/mover entre diferentes contas AWS e quando estamos lidando com um LOT de objetos (milhares ou mesmo milhões) e especificamente com objetos aninhados (objetos que parecem estar dentro de uma pasta quando você olha para eles no Console AWS S3).

Lidando com uma grande quantidade de objetos

No momento em que você lida com milhões de objetos algumas das ferramentas populares da lista acima começam a se comportar com falhas ou podem até travar. Além disso, ao tentar mover uma grande quantidade de objetos você vai descobrir que a maioria das ferramentas lá fora podem levar muito tempo (minutos se não horas para copiar/mover um balde S3 grande) se elas não't travarem ou pararem de responder até a metade. Isto não é aceitável quando se lida com ambientes de produção.

I won't entre em detalhes sobre a filosofia, história e documentação detalhada nesta peça, no entanto vou me referir a ela à medida que for avançando. A Amazon fez um ótimo trabalho na documentação de todos os seus serviços e ferramentas, e vou tentar referenciá-la o máximo que puder. Meu objetivo com este blog é dar uma solução prática que lhe dará a receita mais rápida, precisa e fácil para realizar esta tarefa.

Minha Recomendação

Então qual solução eu escolhi? A minha solução ao lidar com a migração do Amazon S3 para o Google Drive Migration é o Cloudsfer.

Benefícios do uso do Cloudsfer para migrar conteúdo para o Amazon S3

>ul>>li>Desfrute da nossa largura de banda de upload de alta velocidade>li>Migrate todos os tipos de arquivo suportadosli>Keep estrutura hierárquica>/ul>>p>Cloudsfer suporta migrações para o Amazon s3 a partir dos seguintes sistemas:
Move from Egnyte to Amazon s3, Jungle Disk to Amazon s3, Yandex Disk to Amazon s3, BIM 360 to Amazon s3, Alibaba Cloud OSS to Amazon s3, Amazon Cloud Drive to Amazon s3, Google Drive to Amazon s3, Box to Amazon s3, Dropbox to Amazon s3, Backblaze B2 to Amazon s3, OneDrive to Amazon s3, OneDrive for Business to Amazon s3, SharePoint Online para Amazon s3, WebDAV para Amazon s3, Amazon S3 para Amazon s3, FTP para Amazon s3, Microsoft Azure Blob Storage para Amazon s3, Flickr para Amazon s3, Picasa para Amazon s3, Facebook para Amazon s3, Instagram para Amazon s3, 500px para Amazon s3, File system para Amazon s3 e On Premise systems para Amazon s3: Atlassian Confluence to Amazon s3, eRoom to Amazon s3, Documentum to Amazon s3, OpenText LiveLink to Amazon s3, Xerox DocuShare to Amazon s3, eDocs (Hummingbird DM) to Amazon s3, HPE Content Exporter to Amazon s3, Hyperwave para Amazon s3, IBM Lotus Notes para Amazon s3, Hitachi Content Platform (HCP) para Amazon s3, IBM FileNet para Amazon s3, Oracle WCI para Amazon s3, AquaLogic para Amazon s3 (PlumTree).