2017-06-27 5 views
0

Der Versuch, die Daten von AWS S3 über Storage Transfer in Google Cloud Storage zu übertragen.Kopieren von Dateien aus dem S3-Bucket in Google Cloud Storage

Ich habe S3-Bucket "Access Key ID" und "Secret Access Key" und in der Lage, von gsutil (vom Laptop) zu kopieren, aber es wirft Erlaubnis Fehler von Storage Transfer.

Nicht verstehen, wie es mit gsutil funktioniert, aber nicht mit der Speicherübertragung.

Fehlermeldung:

Invalid access key. Make sure the access key for your S3 bucket is correct, or set the bucket permissions to Grant Everyone. 

Gibt es eine Möglichkeit in Compute Engine zu verwenden gsutil Dateien von S3 zu GCS kopieren?

Danke,

+0

Speicherübertragung arbeiten. Haben Sie in Erwägung gezogen, S3-Bucket-Protokolle und CloudTrail zu aktivieren, um festzustellen, ob eine der Anforderungen eintrifft? Und natürlich verifiziert, dass Ihr Zugriffsschlüssel und Geheimnis keine Kopier-/Einfügefehler haben? –

+0

Ich bin nicht der Besitzer des S3-Buckets, um S3-Bucket-Protokolle zu aktivieren. Ich überprüfte mit S3-Bucket-Besitzer und er bestätigte, dass S3-Bucket die richtigen Berechtigungen haben, und ich bin in der Lage, mit gsutil zu kopieren, indem Sie Schlüssel und Geheimnis in Boto-Datei hinzufügen. Key und Secret sind korrekt, ich überprüfte. – user374374

+0

Es gibt möglicherweise eine Berechtigung, dass die Speicherübertragung benötigt wird, die gsutil nicht benötigt, z. B. 's3: GetObjectAcl'. (Das ist eine Vermutung.) Ohne Zugriff auf die Benutzer- und Bucket-Richtlinie ist es schwierig, Fehler zu beheben. Aber ja, Sie können gsutil in Google Compute Engine oder in EC2 oder überall dort einsetzen, wo Sie einen Server mit Bandbreite haben. Es macht keinen Unterschied, wo Sie es ausführen, solange es geografisch nah an beiden Buckets ist. –

Antwort

0

.boto Datei im Home-Verzeichnis mit den folgenden Zeilen Erstellt. gsutil kann sich mit dem S3-Bucket von aws verbinden.

[Credentials] 
aws_access_key_id = <key> 
aws_secret_access_key = <secret key> 

Danke, sollte

Verwandte Themen