Nicht crawl.

Eine Web-Crawler Erstellen von Linksuppen
Jetzt downloaden

Nicht crawl. Ranking & Zusammenfassung

Anzeige

  • Rating:
  • Lizenz:
  • GPL
  • Preis:
  • FREE
  • Name des Herausgebers:
  • Niels Serup
  • Website des Verlags:
  • http://metanohi.org

Nicht crawl. Stichworte


Nicht crawl. Beschreibung

Eine Web-Crawler, die Linksuppen erstellt Nicht crawl ist ein Web-Crawler, der nur Links spart. Es kriecht das Web, versucht aber nicht, alles zu tun. Stattdessen besteht der einzige Zweck darin, Websites für Links zu anderen Websites rekursiv zu überprüfen, die dann auch auf Links zu anderen Sites usw. überprüft werden, wenn Site Y-Links zu Standort X, diese Informationspunkte gespeichert werden, und wenn Site x Wurde noch nicht überprüft, es wird genauso gekrochen, wie es y war. Anforderungen: · Python


Nicht crawl. Zugehörige Software