Ich habe Splash von Docker gestartet. ich schaffen große Lua Script für Spritzen und kratzig, und dann ist es laufen ich sehe Problem:Splash Speichergrenze (scrapy)
Lua error: error in __gc metamethod (/app/splash/lua_modules/sandbox.lua:189: script uses too much memory
Wie ich Speicher für splash encrease kann?
Leider gibt es ab Splash 2.3.2 keine eingebaute Möglichkeit, diese Grenzwerte zu erhöhen. Das Limit ist hier fest codiert: https://github.com/scrapinghub/splash/blob/7b6612847984fc574ebbedf9c3c750180cd93813/splash/lua_modules/sandbox.lua#L176 - Sie können den Wert ändern und dann das Docker-Image neu erstellen, indem Sie docker build -t splash . aus der Splash-Quellenüberprüfung ausführen und dann dieses Bild anstelle des Bilds von DockerHub verwenden.
50 MB Limit ist der maximale Speicher für reine Lua-Objekte (nicht mitgerechnet der RAM, der von einer Webseite verbraucht wird, oder Screenshot-Bilddaten); Ich überlege, dieses Limit in zukünftigen Versionen zu erhöhen und frage mich, wann es nicht genug ist. Was ist dein Anwendungsfall, hast du eine Idee, was diese Erinnerung verbraucht? –