Wie kann ich meine Spinnenläufe mit Scrapyd automatisieren?
Frage
Ich weiß, dass dies wahrscheinlich lächerlich erscheint.Ich habe eine Windows Scrapyd-Implementierung aufgegeben und habe eine Ubuntu-Maschine eingerichtet und alles, was einfach nur toll funktioniert.Ich habe jeweils 3 Projekte mit ihrem eigenen Spinne.Ich kann meine Spinnen aus dem Terminal mit:
ausführen generasacodicetagpre.Alles scheint auch in der Web-Benutzeroberfläche zu arbeiten, auch mit den abgekratzten Elementen, von denen ich den obigen Code, der an den richtigen Stellen auftritt, ausführst.
Ich möchte Project 1 jeden Tag um 12:00 Uhr, Projekt 2 jeden zweiten Tag um 2:00 Uhr und Projekt 3 alle 2 Wochen um 4:00 Uhr projizieren.Bitte helfen Sie mir, dies zu lernen, wie dies geht.
ist Scrapyd sogar eine geeignete Lösung für diese Aufgabe?
Lösung
Geplante Aufgaben scheinen den Trick zu tun.Ich muss sagen, dass ich mich gefragt bin