Überprüfen, ob eine Website mit einem PHP-Skript online ist

Question

Ich muss ein PHP-Skript erstellen, das erfolgreich überprüfen kann, ob eine Website derzeit online/noch aktiv ist.

Ich habe eine Liste von rund 3000 Websites zu überprüfen, und ich möchte einen CRON-Job einrichten, um das Skript täglich auszuführen, um sicherzustellen, dass die Seiten noch aktiv sind.

Ich habe einige der Forschung getan und gebaut etwas mit diesem Beispiel:

<?php 

     if (isDomainAvailible('http://www.css-tricks.com')) 
     { 
       echo "Up and running!"; 
     } 
     else 
     { 
       echo "Woops, nothing found there."; 
     } 

     //returns true, if domain is availible, false if not 
     function isDomainAvailible($domain) 
     { 
       //check, if a valid url is provided 
       if(!filter_var($domain, FILTER_VALIDATE_URL)) 
       { 
         return false; 
       } 

       //initialize curl 
       $curlInit = curl_init($domain); 
       curl_setopt($curlInit,CURLOPT_CONNECTTIMEOUT,10); 
       curl_setopt($curlInit,CURLOPT_HEADER,true); 
       curl_setopt($curlInit,CURLOPT_NOBODY,true); 
       curl_setopt($curlInit,CURLOPT_RETURNTRANSFER,true); 

       //get answer 
       $response = curl_exec($curlInit); 

       curl_close($curlInit); 

       if ($response) return true; 

       return false; 
     } 
?> 

Aber es immer mal aus nach 300 oder so überprüft, wohl wissend, dass dies eine PHP-Ausführung Problem sein könnte, ich habe mich gefragt, ob es war eine bessere oder schnellere Methode, diese Websites zu überprüfen.

Answer 1

Angenommen, dass die Verknüpfungen in einer Datenbank gespeichert sind, können Sie im Feld date der Tabelle date z. B. "last_check" hinzufügen und das Datum nach der Überprüfung aktualisieren.

aber 5 Sekunden pro Standort, multipliziert mit über 3000 Standorten bedeutet 250 Minuten, die ich glaube nicht, ist eine machbare Lösung? - SNpn

Ihre SQL-Abfrage sollte 'last_check' auswählen, wobei 'last_check' nicht dem aktuellen Datum entspricht. Beschränken Sie auf 10 Ergebnisse pro Abfrage.

Legen Sie Ihre Cron, um das PHP-Skript jede Minute, von Mitternacht bis 06.00 Uhr.

* 0-6 * * * * PATH/TO/YOUR/PHP/SCRIPT 

Answer 2

Sie auch solche Funktionen wie fopen(), wenn allow_url_fopen Richtlinie ist an verwenden:

$handle = fopen("http://www.example.com/", "r"); 

oder stream_context_create():

$opts = array('http' => array(
    'method'=>"GET", 
)); 
$context = stream_context_create($opts); 
$fp = fopen('http://www.example.com', 'r', false, $context); 
fpassthru($fp); 
fclose($fp);