Spider Verhalten verfolgen

Spider Verhalten verfolgen

Wenn es Sie Interessiert welche Seiten wann von Ihrem Spider abgeholt werden können Sie das Spider Verhalten etwas genauer anschauen! Es macht genau da Sinn wenn es zu schauen gibt welche Seiten wann abgeholt wurden!

\n\n

Hier ein kurzer Code den Sie einbauen können um dies zu sehen! Nicht vergessen eine seo.txt anzulegen und die Rechte richtig setzen!

\n

\n \n\n$urlname = getenv("REQUEST_URI");\n$trackurl = $_SERVER['PHP_SELF'] ; \n$trackUserAgent =strtolower($_SERVER['HTTP_USER_AGENT']); \nif (stristr($trackUserAgent ,"archiver")) {$trackrobot="Alexa";} \nif (stristr($trackUserAgent ,"googlebot")) {$trackrobot="Google";} \nif (stristr($trackUserAgent ,"msnbot")) {$trackrobot="MSN";} \n\n$trackdate = date('Y-m-d'); \n$tracktime = date('H:i:s'); \n$trackhost = $_SERVER['HTTP_HOST']; \n$trackaddr = $_SERVER['REMOTE_ADDR']; \n$referer = $_SERVER['HTTP_REFERER']; \n\nif ($trackrobot != "") { \n   $eingeloggt = "$trackrobot $urlname $trackdate $tracktime $trackaddr\n";\n   $file = fopen("seo.txt", "a");\n   fwrite($file, "$eingeloggt");\n}\n\n

\n

Das Ergebniss können Sie dann in der seo.txt genau anschauen! Man kann natürlich noch weitere Bots in die Liste eintragen!

Schreiben Sie einen Kommentar

Ihre E-Mail-Adresse wird nicht veröffentlicht. Erforderliche Felder sind mit * markiert.