Wie kann eine Datei in Google Storage von URL in Google App Engine gespeichert werden?

Question

Ich möchte einen Dienst in Google App Engine (Python) erstellen, der die URL eines Bildes erhält und in Google Storage speichert. Ich habe es geschafft, von einer lokalen Datei mit boto oder gsutil Befehlszeile hochzuladen, aber nicht durch Abrufen der Datei über URL. Ich habe versucht, es mit der HTTP requests (PUT) und ich bekomme Fehler Antworten für falsche Signaturen. Offensichtlich mache ich etwas falsch, aber leider habe ich keine Ahnung wo.

Also meine Frage ist: Wie kann ich eine Datei von einer URL abrufen und in Google Storage mit Python für Google App Angine speichern?

Hier ist, was ich getan habe (unter Verwendung eines anderen answer):

class ImportPhoto(webapp.RequestHandler): 
    def get(self): 
     self.response.headers['Content-Type'] = 'text/plain' 
     srow = self.response.out.write 
     url = self.request.get('url') 
     srow('URL: %s\n' % (url)) 
     image_response = urlfetch.fetch(url) 
     m = md5.md5() 
     m.update(image_response.content) 
     hash = m.hexdigest() 
     time = "%s" % datetime.utcnow().strftime("%a, %d %b %Y %H:%M:%S GMT") 
     str_to_sig = "PUT\n" + hash + "\n\n" + 
         time + "\nx-goog-acl:public-read\n/lipis/8418.png" 
     sig = base64.b64encode(hmac.new(
            config_credentials.GS_SECRET_ACCESS_KEY, 
            str_to_sig, hashlib.sha1).digest()) 
     total = len(image_response.content) 
     srow('Size: %d bytes\n' % (total)) 

     header = {"Date": time, 
        "x-goog-acl": "public-read", 
        "Content-MD5": hash, 
        'Content-Length': total, 
        'Authorization': "GOOG1 %s:%s" % 
            (config_credentials.GS_ACCESS_KEY_ID, sig)} 

     conn = httplib.HTTPConnection("lipis.commondatastorage.googleapis.com") 
     conn.set_debuglevel(2) 

     conn.putrequest('PUT', "/8418.png") 
     for h in header: 
      conn.putheader(h, header[h]) 
     conn.endheaders() 
     conn.send(image_response.content + '\r\n') 
     res = conn.getresponse() 

     srow('\n\n%d: %s\n' % (res.status, res.reason)) 
     data = res.read() 
     srow(data) 
     conn.close() 

Und ich als Antwort bekommen:

URL: https://stackoverflow.com/users/flair/8418.png 
Size: 9605 bytes 

400: Bad Request 
<?xml version='1.0' encoding='UTF-8'?><Error><Code>BadDigest</Code><Message>The Content-MD5 you specified did not match what we received.</Message><Details>lipis/hello.jpg</Details></Error> 

Answer 1

Haben Sie die Dokumentation auf how to sign requests lesen? Die zu signierende Zeichenfolge muss die Header Content-MD5, Content-Type und Date zusätzlich zu den benutzerdefinierten Headern und dem Ressourcenpfad enthalten.

Answer 2

Content-MD5 Header ist optional für PUT requests. Versuchen Sie, dies für einen Test auszulassen. Die erforderlichen Header sind Authorization, Date und Host. Es scheint, dass Ihre Anfrage Host Header fehlt.