¿Cómo puede almacenar un archivo en el almacenamiento de Google desde la URL en Google App Engine?

Question

Quiero crear un servicio en Google App Engine (Python) que recibirá una URL de una imagen y almacenarla en Google Storage. Me las arreglé para subir desde un archivo local utilizando boto o línea de comandos gsutil, pero no mediante la recuperación del archivo a través de la URL. He intentado hacerlo utilizando las solicitudes HTTP (PUT) y yo estoy recibiendo respuestas de error para las firmas equivocadas. Obviamente, yo estoy haciendo algo mal, pero por desgracia no tengo ni idea de dónde.

Así que mi pregunta es: ¿Cómo puedo recuperar un archivo desde una URL y lo almacena en el almacenamiento de Google usando Python para Google App Angine

Esto es lo que he hecho (utilizando otro respuesta):

class ImportPhoto(webapp.RequestHandler):
    def get(self):
        self.response.headers['Content-Type'] = 'text/plain'
        srow = self.response.out.write
        url = self.request.get('url')
        srow('URL: %s\n' % (url))
        image_response = urlfetch.fetch(url)
        m = md5.md5()
        m.update(image_response.content)
        hash = m.hexdigest()
        time = "%s" % datetime.utcnow().strftime("%a, %d %b %Y %H:%M:%S GMT")
        str_to_sig = "PUT\n" + hash + "\n\n" + 
                      time + "\nx-goog-acl:public-read\n/lipis/8418.png"
        sig = base64.b64encode(hmac.new(
                                  config_credentials.GS_SECRET_ACCESS_KEY,
                                  str_to_sig, hashlib.sha1).digest())
        total = len(image_response.content) 
        srow('Size: %d bytes\n' % (total))

        header = {"Date": time,
                  "x-goog-acl": "public-read",
                  "Content-MD5": hash,
                  'Content-Length': total,
                  'Authorization': "GOOG1 %s:%s" % 
                                    (config_credentials.GS_ACCESS_KEY_ID, sig)}

        conn = httplib.HTTPConnection("lipis.commondatastorage.googleapis.com")
        conn.set_debuglevel(2)

        conn.putrequest('PUT', "/8418.png")
        for h in header:
            conn.putheader(h, header[h])
        conn.endheaders()
        conn.send(image_response.content + '\r\n')
        res = conn.getresponse()

        srow('\n\n%d: %s\n' % (res.status, res.reason))
        data = res.read()
        srow(data)
        conn.close()

Y estoy recibiendo como respuesta:

URL: https://stackoverflow.com/users/flair/8418.png
Size: 9605 bytes

400: Bad Request
<?xml version='1.0' encoding='UTF-8'?><Error><Code>BadDigest</Code><Message>The Content-MD5 you specified did not match what we received.</Message><Details>lipis/hello.jpg</Details></Error>

Answer 1

¿Ha leído la documentación sobre cómo firmar peticiones ? La cadena de signo debe incluir las cabeceras Content-MD5, Content-Type y Date, además de los encabezados y la ruta del recurso.

Answer 2

Content-MD5 cabecera es opcional para href="http://code.google.com/apis/storage/docs/reference-methods.html#putobject" peticiones PUT . Trate de salir de esto para una prueba.

Además, los encabezados son requeridos Authorization, Date y Host. Parece que su petición no se encuentra encabezado Host.