PHP: Website periodisch parsen

[3of4]

Hallo! Ich würde gerne "elektronisches Stalking" betreiben: Auf eine Website ist der Status eines Fahrzeuges immer gelistet (sofern brav an-/abgemeldet). Ich würde gerne mittels PHP diesen Status gerne z.b. alle 5 Minuten auslesen und loggen (und bei unserer HP dann auf Bereit/Unterwegs setzen). Ich finde zwar einige Beispiel im Internet, wie ich in PHP Seiten parsen kann, aber keinen, wie ich das periodisch tun kann (ohne dabei die Seite immer in einem Browser offen zu lassen). LG Ps: Es geht um unser Fahrzeug, mich interessiert primär ob die Meldungen mit dem KM-Buch einstimmen, damit ich 2011 schneller auf Unstimmigkeiten reagieren kann...

[athropos]

Zumindest unter Windows kannst du dir im Scheduler einen Job einrichten, der alle 5 Minuten die Seite aufruft (bzw. mittels der php.exe parsed).
Bin mir sicher, daß das unter Linux genauso möglich ist.

[3of4]

Wär möglich, wenn ich dafür einen laufenden PC hätte! Allerdings will ich es per PHP machen, weil das der einzige Computer ist (gehostet), der immer eingeschaltet ist / sein sollte...

[ZombyKillah]

Hast du auf den Server keinen Zugriff, oder nur eine FTP Zugriff, wo du die Skripts drauf-kopieren kannst?

Ich verwende php in einen ähnlichen Fall ...
Auf einen Linux Server, wo
1x alle 10min (mit crontab (taskmanager von linux)) eine liste von Seiten erstellt wird ... (eigentlich werden für jede Abfrage eigene php skripts erstellt ...)
und diese ständig abgearbeitet ...

Habe mich früher auf jede minute beschränkt ... war mir aber zu langsam.

Wie/was hast du vor zu loggen?
csv files?
datenbank?
Welche Information brauchst du?
Ist das logen notwendig, oder willst du nur einen Status von einer anderen Seite darstellen?
... sind die primär wichtigsten Fragen.

[SourceGrabber]

Wenn du die Möglichkeit hast auf einem Linux Server einen Crownjob einzurichten, dann würde ich das machen und mit lynx das Script regelmäßig aufrufen um den Status auszulesen und in eine Datenbank zu schreiben. Von dort kannst du dir dann auf einfache Weise Listen generieren, die du zum Vergleich mit dem KM-Buch verwendest.

Noch einfacher wäre es natürlich die ursprüngliche Webseite so anzupassen, dass sie bei jeder Statusänderung einen Eintrag in der Datenbank erstellt.

[Philipp]

Wieso mit Lynx? PHP Scripte kann man direkt ausführen wenn es der Server erlaubt.

[ZombyKillah]

Du kannst auch aus einen php skript einen neuen php skript aus aufrufen ...
der alte wird dann durch ein time-out gekillt ...

... also eine einfache rekursive Schleife, die das Risiko eingeht, den Server irgendwann zu überlasten ... wenn sie zu oft gestartet wird.
Wobei man dieses durch ein überprüfen, ob eine Datei vorhanden ist speeren kann ...

PHP-Code:

function do_lock(){
 $file = "running.lock";
 if ($fh = fopen($file, "r")) { //Wenn das file schon exestiert und geöffent werden kann
  $last_time = fget($fh);
  fclose($fh);
  $now = date("U");
  if ($last_time < $now - 10) return false;
   //Und der skript vor unter 10 sek rannte gebe falsch zurück.
 }
 $fh = fopen($file, "w+");
 fput($fh, date("U"));
 fclose($fh);
 return true;
}
function do_unlock(){
 $file = "running.lock";
 unlink($file);
}

if (do_lock()){
...

...
sleep(5);    //Warte 5 sek ...
do_unlock(); //entferne das Schloss ...
$me = "http://".$_SERVER['SERVER_NAME'].$_SERVER['PHP_SELF'];
$run_again = fopen($me, "r");
fget($run_again); //rufe dich selbst auf ...
} 


[3of4]

Speichern würde ich gern in eine mysql-db, aber csv-file geht auch. Ob ich crone-job o.ä. machen darf, weiß ich nicht - Ich bin nicht einmal für die HP zuständig, sondern hab nur einen RedaktionsUser... Ich frag mal nach. Ps: Es geht konkret um max. 160 Zeichen lange Textmeldungen und dazu zwei Datetimes aus eine Tabelle, wenn ein Schlüsselwert drin vorkommt. Die Rekursion hat eine unschöne Warnung am Server produziert :-(

[SourceGrabber]

Zitat von Philipp

Wieso mit Lynx? PHP Scripte kann man direkt ausführen wenn es der Server erlaubt.

Viele Webhoster erlauben das jedoch nicht, dann bleibt dir der Umweg leider nicht erspart.

Ich glaube Cronjob wäre ganz gut, wenn möglich und sonst könntest ja noch einen Redirect auf das Script selbst machen, dazu muss aber halt dann der Browser der es gestartet hat offenbleiben. Außerdem kommt dann auch noch ein ev. Problem mit Timeouts dazu.

[zAPPEL]

Bei fast jedem Hoster wird dir diese Endlosschleife zu einem Timout führen - das ist eine ziemlich "hässliche" Lösung

lg