1
Ich habe ein Python Scraping-Skript Ich möchte auf AWS Lambda laufen, um auf EC2 Kosten zu sparen. Das Skript benötigt jedoch auch PhantomJS, oauth2client, PYOpenSSL, Selen und natürlich Beautiful Soup, um das Scraping zu vervollständigen.Web Scraping mit AWS Lambda
Ist es möglich, Beautiful Soup (durch Ausführen der zusätzlichen erforderlichen Programme oben) auf AWS Lambda auszuführen?
Side-Hinweis: AWS Lambda-Funktionen eine 5-minütige Ausführung Grenze haben, die es ungeeignet für Schaben machen könnte. Sie sollten in Betracht ziehen, [Amazon EC2 Spot-Instanzen] (https://aws.amazon.com/ec2/spot/) zu verwenden, um Ihre Kosten für diese Art von nicht dringender Arbeitslast zu reduzieren. –
Prost John. Weißt du, ob es möglich ist, weitere Module wie PhantomJS, Beautiful Soup usw. hinzuzufügen, wenn innerhalb der ersten 2 Minuten der Ausführungszeit gesagt wird? – LA2028