Java Web Crawler: Apache Nutch

 

https://en.wikipedia.org/wiki/Apache_Nutch

http://nutch.apache.org/

http://nutch.apache.org/downloads.html 

https://wiki.apache.org/nutch/#Tutorials

https://wiki.apache.org/nutch/RunNutchInEclipse

Web-Spider

Wenn Onlineangebote offline interessant sind, dann können diese heruntergeladen werden. Kandidaten für diesen Job:
- httrack (http://www.httrack.com/)
- Backstreedbrowser (http://www.spadixbd.com/backstreet/#BackStreet_Download)