Klicken Sie auf Link in .each Schleife in Ruby Mechanize

Question

Ich arbeite an einem Skript zum Crawlen einer Seite von Suchergebnissen und ich habe eine Schleife erstellt, um das richtige Suchergebnis zu finden, und das funktioniert. Das Problem, auf das ich stoße, ist, dass jede Permutation, die versucht, auf den Link innerhalb des LI-Elements zu klicken, nicht funktioniert. Zuerst habe ich versucht, den Anker innerhalb der LI zu finden, aber es ist ein Nokogiri-Objekt, ich habe versucht, in @page auszugehen und auf das richtige Element zu bohren, aber es kommt nil zurück.

Gibt es eine Möglichkeit, innerhalb des LI-Elements zu suchen, auf das ich bereits hingebohrt habe?

require 'mechanize' 
require 'nokogiri' 
require 'csv' 

@agent = Mechanize.new do |agent| 
    agent.user_agent_alias = 'Mac Safari' 
end 
@page = @agent.get('https://www.milwaukeetool.com/search-results?FullTextKeywords=48-42-5540') 

def resultsPageSearcher (searchText) 
    @page.search('#results ul > li').each do |li| 
    results_sku = li.css('span.results-sku').text 
    if results_sku == searchText 
      link = @page.link_with(:text => results_sku) 
     @page = link.click 
    end 
    end 
end 

resultsPageSearcher("48-42-5540") 

Relevent LI Element (I Fremd Code ausgeschnitten, die nicht relevant schien, kann ich mehr hinzufügen, wenn notwendig, ich habe einfach nicht über Post wollen)

<li> 
    <a href="/accessories/cutting/48-42-5540" class="results-image"> 
     <img src="//cdn.milwaukeetool.com/~/media/Images/Accessories/Cutting/48-42-5540/21867_48-42-5540.jpg?h=100&amp;thn=1&amp;w=100" alt=""></a> 
    <a class="results-title" href="/accessories/cutting/48-42-5540">4" 10 TPI High-Carbon Steel Jig Saw Blade (5 PK)</a>    
    <span class="results-sku">48-42-5540</span> 
</li> 

Answer 1

So fand ich eine ziemlich coole Bibliothek den anderen Tag, dass ich denke, wird Ihnen dabei helfen. Es wird zu dem Link gehen, den Sie ihm geben und dann nach einem Link mit dem gewünschten Text suchen und darauf klicken. Wenn Sie Probleme damit haben, lassen Sie es mich wissen.

require 'watir' 
require 'headless' 
require 'csv' 

headless = Headless.new 
headless.start 
browser = Watir::Browser.new 
browser.goto('https://www.milwaukeetool.com/search-results?FullTextKeywords=48-42-5540') 
browser.link(text: searchText).when_present.click