Rufen Sie eine Funktion in den Einstellungen von Spider Scrapy

Question

Ich habe zwei Spinnen A und B. Ich brauche eine Funktion aufzurufen, die

in der Spinne settings.py-Datei definiert ist

Project Name |--Project Name | |-- spiders | | |-- __init__.py | | |-- A.py | | |-- B.py | |-- __init__.py | |-- items.py | |-- pipelines.py | |-- settings.py

Es gibt eine Funktion in settings.py, die ich von A.py und B.py auf nahe zugreifen müssen Spinnen

settings.py

def revoke_ip(): 
    logging.info('Revoking access') 

Das ist, was ich von A.py versucht:

def closed(self, reason): 
    logging.info('Spider terminating because of %s' % reason) 
    current_project_settings = get_project_settings() 
    revoke_ip_call = getattr(current_project_settings, "revoke_ip") 
    revoke_ip_call() 

Aber dieses Ding nicht funktioniert auch nicht, was here

erwähnt

Gibt es etwas, was ich falsch oder andere Art und Weise, es zu tun tue?

Answer 1

Beim Importieren einer Datei durchsucht Python nur das aktuelle Verzeichnis, das Verzeichnis, aus dem das Einstiegspunktskript ausgeführt wird, und sys.path, das Positionen wie das Paketinstallationsverzeichnis enthält. Sie können die Einstellungsdatei importieren, um die Funktion aufzurufen. Um dies zu tun, fügen Sie diese an Ihre Funktion:

import sys 
sys.path.insert(0, '../') 
import settings 

Answer 2

Was für mich gearbeitet, dank der Antwort, dass @Jose gebucht, das war als settings.py in einem anderen Verzeichnis als die Spinne war, die ich lief und Python nur Durchsucht das aktuelle Verzeichnis. So

Ich habe versucht, den Pfad der Datei überprüft, die es jede Zeit ich die Spinne laufen gibt und anscheinend den Weg, den ich bekomme

/tmp/unpacked-eggs/__main__.egg/project name/spiders 

Also, was ich tun musste, war:

import sys 
import os 
sys.path.insert(0, os.path.dirname(os.path.abspath(__file__)) + '/../') 
import settings