걱정되서 이것들을 섞고 있어요.
저는 (API를 제공하지 않는 사이트에서) m에 대한 일부 데이터를 수집하는 PhantomJS로 작성된 웹 크롤러를 가지고 있습니다. 제 컴퓨터에서 테스트해 보았는데 꽤 좋아 보입니다. 지금 하고 싶은 일은 다음과 같습니다. 크롤러를 실행하고 연중무휴로 작동하는 방식을 확인할 수 있는 원격 컴퓨터입니다.
나에게 실제로 필요한 것이 무엇인지 완전히 확신할 수 없습니다. 웹만 크롤링하려면 GUI 등이 포함된 가상 머신이 필요합니까? 내가 발견했다윈도우 애저하지만 가장 저렴한 옵션은 월 12~20달러로 꽤 많은 금액입니다. 내가 원하는 것을 달성하는 가장 저렴한 방법은 무엇입니까? 특히 한 번에 1개 이상의 크롤러를 실행하려면 더 많은 시스템을 실행해야 할 수 있으며, 한 달에 10달러를 지불하더라도 비용이 많이 들 수 있습니다!
답변1
당신이 고려할 수 있는 것은 DigitalOcean 컨테이너를 보는 것입니다.
컨테이너는 가상 머신의 한 형태이지만 커널이 VM의 호스트에 있기 때문에 컨테이너의 크기와 리소스 사용량이 더 적습니다. 서비스를 제공하는 다른 컨테이너가 많이 있으므로 이에 대해 조사해 보십시오.