Gibt es einen Ort, an dem man täglich eine Liste neu entstehender Websites herunterladen kann, wie es Suchmaschinen tun? Wenn ich eine neue Website einrichte, erstelle ich keinen Backlink dafür. Woher kennt Google meine Website und crawlt sie? Verwendet es eine Art Whois-Datenbank? Aber ich glaube nicht, dass es eine Whois-Datenbank gibt, die es Ihnen ermöglicht, jeden Tag Abfragen durchzuführen.
Antwort1
Es gibt keine autorisierte Quelle zum Herunterladen einer Liste neuer Websites und entgegen einiger Kommentare werden neue Websites aufgrund von DNS nicht erkannt.
Websites werden normalerweise über einen Link zu ihnen oder eine Anfrage an die Suchmaschine gefunden. Viele Systeme „pingen“ Google automatisch an, wenn die Website installiert oder Inhalte hinzugefügt werden, um nach einem Update zu fragen.