Python "Scraping" Karten/Bilder

Question

Ich möchte Python verwenden, um Snapshots von Karten/Bildern von Eigenschaften zu kratzen. Ich habe die Postleitzahl für alle Eigenschaften, die ich brauche, um Karten/Bilder zu erhalten, aber ich bin unsicher, wie man Python benutzt, um die Postleitzahl zu nehmen, eine Website zu durchsuchen, eine Momentaufnahme der Karte zu machen und sie dann zu speichern.

Ich hatte ursprünglich gedacht, Selenium zu verwenden, aber nicht sicher, dass dies der effizienteste Weg wäre, die Websites zu durchsuchen?

Ich habe erst ein paar Monate Python gelernt und würde es wirklich schätzen, wenn mir jemand in die richtige Richtung zeigen könnte!

Answer 1

könnten Sie die Google-statische Karten-API verwenden, etwa so:

import requests 

zoom = '13' 
size = '600x300' 
maptype = 'roadmap' 

scheme = 'https://maps.googleapis.com/maps/api/staticmap?center=[Location]&zoom={0}&size={1}&maptype={2}'.format(zoom, size, maptype) 
locations = ['Brooklyn+Bridge,New+York,NY', '2550+SW+Hillsboro+Hwy,Hillsboro,OR', 'TX+78016'] # place, address, state+zip 

for loc in locations: 

    url = scheme.replace('[Location]', loc) 
    resp = requests.get(url) 

    print('Status code: {0} | {1}'.format(resp.status_code, url)) 

    if resp.status_code == 200: 

     with open('map_image_{0}.png'.format(loc), 'wb') as f: 

      f.write(resp.content) 

Answer 2

Scrapy als auch eine gute Wahl sein kann. Es braucht einige initiale Einstellungen, um ein Projekt zu starten, und aktuell ist die letzte stabile Version für Python 2.7 (Unterstützung für Python 3 läuft).

Wenn Ihr daran interessiert, Scrapy hier ist die Dokumentation:

und ein Zitat, wie Scrapy Bilder aus Dateien ziehen können: https://doc.scrapy.org/en/1.3/index.html

„Scrapy bietet wiederverwendbare Artikel Pipelines zu einem bestimmten Element angebracht Herunterladen von Dateien (B. wenn Sie Produkte scratzen und auch ihre Images lokal herunterladen möchten.) Diese Pipelines haben ein wenig Funktionalität und Struktur (wir bezeichnen sie als Medien-Pipelines), aber normalerweise verwenden Sie entweder die Files-Pipeline oder die Images-Pipeline . "

Ich habe gerade erst mit Scrapy begonnen und habe Spiders (ihren Web Crawler) eingerichtet und damit begonnen, sie zu schreiben und kann dir helfen, dich einzurichten, wenn du interessiert bist.