Nicht crawl. Ranking & Zusammenfassung
- Name des Herausgebers:
- Niels Serup
- Website des Verlags:
- http://metanohi.org
Nicht crawl. Stichworte
Nicht crawl. Beschreibung
Eine Web-Crawler, die Linksuppen erstellt Nicht crawl ist ein Web-Crawler, der nur Links spart. Es kriecht das Web, versucht aber nicht, alles zu tun. Stattdessen besteht der einzige Zweck darin, Websites für Links zu anderen Websites rekursiv zu überprüfen, die dann auch auf Links zu anderen Sites usw. überprüft werden, wenn Site Y-Links zu Standort X, diese Informationspunkte gespeichert werden, und wenn Site x Wurde noch nicht überprüft, es wird genauso gekrochen, wie es y war. Anforderungen: · Python
Nicht crawl. Zugehörige Software