Ich fürchte, ich verwechsle diese.
Ich habe meinen eigenen Webcrawler in PhantomJS geschrieben, der einige Daten für mich sammelt (von einer Site, die keine API bereitstellt). Ich habe ihn auf meinem eigenen Computer getestet und er sieht ganz gut aus. Was ich jetzt machen möchte, ist, einen Remotecomputer zu haben, auf dem ich meinen Crawler ausführen und seine Leistung rund um die Uhr sehen kann.
Ich bin mir nicht ganz sicher, was ich eigentlich brauche. Wenn ich nur das Web crawlen möchte, brauche ich dann eine virtuelle Maschine mit GUI und so? Ich habe festgestelltWindows Azureaber die billigste Option kostet 12-20 USD/Monat, was ziemlich viel ist. Was ist der billigste Weg, um das zu erreichen, was ich will? Besonders wenn ich mehr als 1 Crawler gleichzeitig ausführen möchte, brauche ich möglicherweise mehr laufende Maschinen, selbst bei 10 Dollar im Monat könnte das viel kosten!
Antwort1
Sie könnten sich einen DigitalOcean-Container anschauen.
Container sind eine Form einer virtuellen Maschine, aber der Kernel befindet sich auf dem Host der VM, was bedeutet, dass die Größe des Containers und die Ressourcennutzung geringer sind. Es gibt viele andere Container, die Dienste bereitstellen, also informieren Sie sich darüber.