Downloadliste

Projektbeschreibung

Crawl starts a depth-first traversal of the Web at the specified URLs. It stores all JPEG images that match the configured constraints. Crawl is fairly fast and allows for graceful termination. After terminating crawl, it is possible to restart it at exactly the same spot where it was terminated. It also keeps a persistent database that allows multiple crawls without revisiting sites.

Systemanforderungen

Die Systemvoraussetzungen sind nicht definiert
Information regarding Project Releases and Project Resources. Note that the information here is a quote from Freecode.com page, and the downloads themselves may not be hosted on OSDN.

2003-05-18 04:42
0.4

Crawling ist zuverlässiger, und Crawl-Leistung hat für große kriecht verbessert.
Tags: Minor bugfixes
Crawling is more reliable, and crawl performance has improved for large crawls.

2002-01-29 07:47
0.3

Eine komplette für höhere Leistung neu zu schreiben, einschließlich der Unterstützung für alle Medientypen, asynchronen DNS-Abfragen und optional Wartezeit zwischen Hosts. Die Konfigurationsdatei gibt zulässigem Größe der Multimedia-Objekte je nach Medien-Typ, etc.
Tags: Major feature enhancements
A complete rewrite for higher performance, including support for all media types, asynchronous DNS lookups, and optional wait time between hosts. The configuration file specifies permittable size of media objects depending on media-type, etc.

2001-12-13 06:36
0.2

Diese Version hat Übertragbarkeit Fixes und unterstützt das Herunterladen von Medien-Typen andere als nur Bilder.
Tags: Minor feature enhancements
This release has portability fixes, and supports downloading of media types other than just images.

2001-07-04 01:18
0.1b

Dieses Release behebt einen Bug, bei dem Crawl aufhören würde schon bei der Begegnung mit Fehlern auf spätere Verbindungen. Die Ausführlichkeit der Ebene und Anzahl der gleichzeitigen Verbindungen sind einstellbar jetzt
Tags: Major bugfixes
This release fixes a bug where crawl would stop
early when encountering errors on subsequent
connections. The verbosity level and number of
concurrent connections are tunable now

2001-06-19 01:09
0.1

Tags: Initial freshmeat announcement

Project Resources