Ich habe eine relativ neue Website gestartet und sie bei Google und allen anderen eingereicht. Ich verwende auch die Webmaster-Tools von Google. Ich frage mich, wie ich herausfinden kann, wie oft der Google Spider auf meine Website zugreift. Ich höre in Foren immer Leute darüber reden, dass „pro Stunde 250 Seiten von mir gecrawlt werden“ und so weiter … Gibt es eine Software, die ich verwenden kann? Eine JavaScript-Methode ähnlich wie Google Analytics? Oder gibt es etwas, um die Protokolle meines Servers zu analysieren? Danke
Antwort1
Überprüfen Sie einfach die Webserver-Protokolle, wenn der BesucherUser-AgentAnforderungsheader entspricht/enthältGooglebotEs gibt vieleTools zur Analyse von Webserver-Protokollen, entweder kostenlos oder kostenpflichtig. Die meisten von ihnen können auch Bots kategorisieren. Von ihnen allen habe ich die besten Erfahrungen gemacht mitGoogle Analytics.
Antwort2
Melden Sie sich bei Google Webmaster Central (auch bekannt als Webmaster-Tools) an, bestätigen Sie Ihre Site und warten Sie, bis die Statistiken angezeigt werden.
Antwort3
Es ist ziemlich unwahrscheinlich, dass der Google Bot JavaScript auf Ihrer Site ausführt, das dessen Eintreffen verfolgt. Daher besteht die beste Hoffnung darin, sich die Site-Protokolle selbst anzusehen – entweder in Webalizer oder den Hunderten anderer Protokolldatei-Parser. Oder öffnen Sie sie einfach in einem Texteditor und führen Sie einen regulären Ausdruck aus, um den Google Bot-Benutzeragent zu extrahieren.
Sie sollten dann sehen, wie viele Treffer es in einem bestimmten Zeitraum erzielt. Wenn es zu viele sind, sollten Sie vielleicht einenXML-Sitemap
Antwort4
Ich würde Google Analytics empfehlen. Es erfasst alle Besuche auf Ihrer Website und Sie können feststellen, ob ein Besucher ein Bot war oder nicht. Es eignet sich auch hervorragend für die Suchmaschinenoptimierung Ihrer Website und trägt dazu bei, die Besucherzahl zu erhöhen.