0
Ich benutze jetzt Casperjs für Web-Crawler. Fast alles ist gut, aber ich hatte einige Probleme. Zuerst ist mein Code wie folgt.casperjs evaluate Funktion gibt ungültigen Wert zurück
casper.start().each(SOME_URLS, function(self, URL) {
self.thenOpen(URL, function() {
self.then(function() {
var getDatas = function() {
var title = $('SOME_SELECTOR').map(function() {
return $(this).text();
}).get();
return {
title: title
};
}
data = self.evaluate(getDatas);
console.log(JSON.stringify(data));
});
});
}).run();
Ich möchte einige Daten von der Webseite zu 'Daten' Variable erhalten. Manchmal sind die Daten perfekt (auf console.log), aber manchmal sind die Daten leer!
Warum das passiert? Was habe ich falsch gemacht?
Es sieht aus wie Sie jQuery verwenden, wenn Sie es zu Ihrem casper User-Agent nicht hinzufügen gibt es keine Garantie, dass unabhängig von Website, die Sie kratzen lädt es. Könnte das das Problem sein? Es könnte auch sein, dass Ihre Zuordnung zu Daten in der falschen Reihenfolge ausgeführt wird, versuchen Sie es in eine separate casper.then(). Bitte geben Sie auch Links zu der Website an, auf der sie funktioniert, und arbeiten Sie nicht daran, den Nutzern zu helfen, eine Antwort zu finden. –