scraping probsssss

Question

Ich habe zwei Fragen.

1. Ich versuche, den Wert von propval zu bekommen, aber wenn ich den Schaber renne, bekomme ich nur eine leere Schnur zurück. Sollte ich neben Filter eine andere Methode verwenden oder wähle ich nicht das richtige Element? Ich habe versucht verschiedene Elemente, aber es tut das gleiche.

2. Kann ich eine Schleife verwenden, um jede einzelne Tabellenzeile zu durchsuchen, um alle Prop-Wert-IDs zu sammeln, oder gibt es einen effizienteren Weg?

const express = require('express'); 
const fs = require('fs'); 
const request = require('request'); 
const cheerio = require('cheerio'); 
var app = express(); 

app.get('/scrape', function(req, res) { 


url = 'http://streak.espn.com/en/'; 

request(url, function(error, response, html){ 
    if(!error) { 
     var $ = cheerio.load(html); 

     var gameQuestion, propVal; 
     var json = { gameQuestion : "", propVal : ""}; 

     $('.gamequestion').each(function(){ 
      var data = $(this) 
      gameQuestion = data.text(); 

      json.gameQuestion = gameQuestion; 

     }) 

     $('a#.matchupDiv').each(function() { 
      var data = $(this); 

      propVal = data.text(); 

      json.propVal = propVal; 
     }) 
    } 


    fs.writeFile('output.json', JSON.stringify(json, null, 4), function(err){ 

     console.log('File successfully written! - Check your project directory for the output.json file'); 
    }) 

    res.send('Check your console!') 

    }); 
}) 



app.listen('8081') 

console.log('magic happens on port 8081'); 

exports = module.exports = app; 

<tbody> 
    <tr> 
     <td rowspan = "2" class='mg-column1 start'></td> 
     <td rowspan = "2" class='mg-column2 start'></td> 
     <td rowspan = "2" class='mg-column3 start'></td> 
      <div class="mg-check" propval="m57207o58439" name="matchupDiv">nbsp;</div> 

Answer 1

Die jQuery .filter() Funktion entweder ein Element nimmt, einen Wähler, eine Funktion oder ein anderes Objekt jQuery (http://api.jquery.com/filter/). Da Sie eine Funktion in den Filter übergeben, erwarten Sie, dass Sie einen booleschen Wert (einen Wahr/Falsch-Wert) zurückgeben.

Was Sie wahrscheinlich verwenden möchten, ist die .each() Funktion. (http://api.jquery.com/jquery.each/). Wenn Sie eine Klasse abfragen, erhalten Sie ein Array übereinstimmender Objekte zurück. .each() wird durch das Array durchlaufen und Sie könnten tun, was Sie dort zu tun versuchen. Versuch es einmal.

HINZUGEFÜGT ***** Ich habe mir den Quellcode angesehen, und es gibt keine Klasse propval. Sie benötigen eine Abfrage zu ändern:

$('.mg-check').attr('propVal')

Aber .mg-check scheint keine Kinder zu haben. Was versuchst du genau zu kratzen?

EDITED *** Um ein Array der propVals zu bekommen, versuchen Sie dies:

ändern Initialisierung Ihrer json.propVal''-[], dann ...

$('.mg-check').each(function(){ json.propVal.push($(this).attr('propVal')) });