Welk programma kan ik gebruiken om deze lijst met links in bulk te downloaden?
Ik heb een programma nodig dat ik een lichtje URL’s kan geven (plakken of in een bestand) zoals hieronder en dan moet het in staat zijn om die links te crawlen en bestanden van een bepaald type op te slaan, zoals bijvoorbeeld afbeeldingen. Ik heb een paar spinnen geprobeerd maar heb geen geluk gehad.
Op dit moment is de enige manier om alles te downloaden, het openen van elke link, dan gebruik ik de “DownThemAll! Firefox plugin die alle afbeeldingen (of elk bestandstype) op de pagina selecteert en downloadt. Dit werkt pagina voor pagina, maar ik heb iets dergelijks nodig dat een hele lijst van URL’s werkt.
Heeft iemand suggesties? Bedankt.
PS. Zou ik ook kunnen toevoegen dat het iets vrij eenvoudigs is om te gebruiken dat een half-deugdelijke gebruikersinterface heeft en niet vanaf de commandoregel loopt. Bedankt
http://www.someUrl.com/fhg/xbox/1/index.php?ccbill=123456
http://www.someUrl.com/fhg/allison_gf/1/index.php?ccbill=123456
http://www.someUrl.com/fhg/cookin/1/index.php?ccbill=123456
http://www.someUrl.com/fhg/blackjacket/1/index.php?ccbill=123456