Gadgetshowto
Wget is een opdrachtregelhulpprogramma dat kan worden gebruikt om bijna alles wat op internet beschikbaar is, te downloaden. De vangst is dat het beschikbaar zou moeten zijn via HTTP-, HTTPS- of FTP-protocollen; anders kan Wget het niet downloaden. Er zijn een aantal manieren waarop Wget kan worden gebruikt, u kunt Wget bijvoorbeeld gebruiken om elke afbeelding op een website te downloaden, of u kunt ook een enkel bestand downloaden. Wget is zelfs in staat om downloads te hervatten, indien mogelijk. Dus als u zich afvraagt hoe Wget werkt en wat het voor u kan doen, hier is hoe je Wget kunt gebruiken
Wget installeren
1. Wget installeren op macOS Sierra
Voordat we beginnen met het gebruik van Wget, moeten we het op ons systeem installeren. Gelukkig worden de meeste Linux-distributies geleverd met Wget vooraf geïnstalleerd, dus u hoeft geen extra werk te doen. Als u echter een Mac gebruikt, moet u Wget installeren. Dit kan eenvoudig worden gedaan met Homebrew (download). Als u hulp nodig heeft, volgen hier de stappen die u moet volgen:
- Eerst moet u Homebrew op uw Mac installeren om Wget te kunnen downloaden. Om dit gewoon te doen start de Terminal, en typ de volgende opdracht:
/ usr / bin / ruby -e "$ (curl -fsSL https://raw.githubusercontent.com/Homebrew/install/master/install)"
- Nadat de opdracht is voltooid, Homebrew wordt geïnstalleerd op uw systeem. U kunt nu Homebrew gebruiken om pakketten te installeren, zoals Wget. Voer in de Terminal de volgende opdracht uit:
brew installeren wget
- Homebrew start automatisch downloaden, uitpakken en installeren van Wget op uw systeem. Deze stap kan enige tijd duren, afhankelijk van uw netwerksnelheid, dus wees geduldig. Zodra de opdracht is voltooid, zou u Wget op uw Mac moeten kunnen gebruiken. Gebruik de opdracht om te controleren of het is geïnstalleerd:
wget -V
2. Wget installeren op Windows
Het installeren van Wget op Windows kost iets meer moeite, maar het is gemakkelijk te doen. Als u Wget op uw Windows-pc wilt installeren, volgt u de onderstaande stappen:
- Download eerst Cygwin en dan voer het gedownloade installatiebestand uit.
- Als er om de standaard downloadbron wordt gevraagd, kiest u de optie 'Installeer vanaf internet“, En klik op "De volgende".
- Kies een installatiemap voor Cygwin, evenals een map waar het pakketbestanden zal opslaan voor installatie van hulpprogramma's.
- In het volgende scherm moet je je internetverbinding selecteren. Als u een proxy gebruikt, kiest u het type proxy dat het is en vult u de details in. Voor de meeste gebruikers is de keuze echter "Directe verbinding.
- U krijgt dan een lijst met spiegels, kies een van deze om Cygwin te downloaden. Als het downloaden mislukt, kunt u het opnieuw proberen met een andere mirror.
- Zoek in het volgende venster naar "Wget", en klik op het plus naast "web" in de lijst die verschijnt. Hier is het selectievakje naast 'wget”Automatisch geselecteerd. Klik gewoon op "De volgende".
- Het volgende scherm toont u de pakketten die u moet downloaden. Gewoon klikken "De volgende".
- Zodra de installatie is voltooid, wordt u gevraagd of u dat wilt Maak een desktop icoon, en / of voeg een toegang tot het startmenu. Dit is volledig een kwestie van persoonlijke voorkeur, maar ik raad u aan het in ieder geval toe te voegen aan het startmenu, zodat u het gemakkelijk kunt vinden.
Dat is het. Wget is nu geïnstalleerd op uw Windows-pc. U kunt het echter niet uitvoeren vanaf de opdrachtprompt. In plaats daarvan moet u start de Cygwin Terminal en gebruik Wget vanaf daar.
Hoe Wget te gebruiken
Nu we Wget op ons systeem hebben geïnstalleerd, gaan we alle coole manieren verkennen waarop we Wget kunnen gebruiken om bestanden, mappen en zelfs hele websites van internet te downloaden. Hier zijn een paar interessante dingen die u kunt doen met Wget op uw systeem.
Opmerking Ik gebruik Wget op een MacBook Air met macOS Sierra 10.12.3 bèta. Omdat het hulpprogramma dat we gebruiken echter hetzelfde is (Wget), zijn de opdrachten hetzelfde op elk besturingssysteem waarop u Wget gebruikt..
1. Gebruik Wget om bestanden te downloaden
U kunt Wget gebruiken om gemakkelijk bestanden van internet te downloaden. Gebruik gewoon de volgende opdracht
wget
- Download een bestand en sla het op met een specifieke bestandsnaam
Bestanden op servers hebben soms de raarste namen, en misschien wilt u het bestand downloaden en Wget het automatisch laten hernoemen naar iets dat voor u logischer is. Gebruik hiervoor de volgende opdracht
wget -o
- Download alleen specifieke bestandstypen
Een webserver kan een aantal verschillende bestanden hosten. Dus, wat als u alleen alle PDF's op de server wilt downloaden, of misschien alle GIF's? Gebruik gewoon het volgende commando:
wget -r -Een pdf
Dit specifieke commando werd gebruikt door Mark Zuckerberg in zijn slaapzaal op Harvard, om alle afbeeldingen met slechts één commando te downloaden en de beruchte website "facesmash.com" te bouwen..
wget -r -Een jpg, jpeg, png, bmp
2. Download bestanden van meerdere URL's met Wget
Stel dat u bestanden moet downloaden van een aantal verschillende locaties op internet. Er kan een PDF-bestand op url1, een belangrijke ZIP-bestand op url2, en iets anders in url3. Als je Wget op de traditionele manier hebt gebruikt, moet je het drie keer uitvoeren. Er is echter een veel eenvoudigere manier om dit te doen.
- Maak eerst een bestand met alle URL's waarvan u gegevens moet downloaden. Zorg ervoor dat je houd elke URL op een eigen regel. Sla het bestand op en vergeet niet de naam te onthouden.
- Gebruik in Terminal de volgende opdracht om bestanden van alle URL's te downloaden:
wget -i
waar 'bestandsnaam is de naam van het bestand dat je hebt gemaakt met alle URL's je moest dingen downloaden van.
3. Download een volledige website met Wget
Ja, je leest het goed. U kunt Wget ook gebruiken om de inhoud van een hele website te downloaden. Het is duidelijk dat als de website te groot is, deze opdracht veel tijd in beslag zal nemen om te voltooien, om nog maar te zwijgen van het feit dat het veel ruimte op uw systeem in beslag neemt. Dat gezegd hebbende, als je Wget wilt gebruiken om een hele website te downloaden, gebruik je gewoon de volgende opdracht:
wget --mirror -p-P ./LOCAL-DIR WEBSITE-URL
Hiermee wordt de hele website gedownload naar een map "LOKAAL-DIR”In uw werkmap. De bestanden van de website worden opgeslagen in een map met dezelfde naam als de website, dankzij “WEBSITE URL.
4. Gebruik Wget als een webspin
Je kunt Wget ook laten werken als een webcrawler (of een webspin). Dit is handig als u dat wilt bevestig dat de URL van het bestand dat u wilt downloaden, geldig is. Gebruik de volgende opdracht om Wget als een webspin te gebruiken en de geldigheid van URL's te controleren:
wget --spider
Hiermee wordt gecontroleerd of de URL die u hebt genoemd, bestaat, en u krijgt een antwoord met de resultaten van de controle.
- Positieve reactie:
- Negatieve reactie:
5. Ga door met onvolledige downloads
Dit is weer een heel cool ding dat Wget kan doen. Stel dat u een bestand aan het downloaden was met Wget, maar om de een of andere reden uw laptop moest afsluiten. De volgende keer dat u hetzelfde bestand wilt downloaden, kan Wget dat ook ga door met downloaden voor jou. Je moet gewoon zorg ervoor dat u zich in dezelfde map bevindt als waar u het bestand de laatste keer aan het downloaden was, en gebruik vervolgens de volgende opdracht:
wget -c
Wanneer Wget ziet dat een deel van het bestand al in uw systeem aanwezig is, zal het automatisch doorgaan met downloaden.
Opmerking Als het bestand op de server is gewijzigd sinds de laatste keer dat u het probeerde te downloaden, dan moet u deze opdracht niet gebruiken, omdat het zal resulteren in een beschadigd bestand dat u niet kunt lezen.
Als de server geen doorlopende downloads toestaat, zal Wget weigeren om de download helemaal opnieuw te starten. Als u de download helemaal opnieuw wilt starten, moet u het gedeeltelijk gedownloade bestand van uw systeem verwijderen, eerste.
Er zijn wat meer voorwaarden aan het gebruik van dit argument, en je kunt er meer over lezen op de Wget man-pagina.
6. Beperk de downloadsnelheid
Als u Wget gebruikt om bestanden te downloaden en ernaast op internet surft, wilt u waarschijnlijk niet dat al uw bandbreedte door Wget wordt gebruikt. Gelukkig bevat Wget een argument dat u kunt gebruiken beperk de hoeveelheid bandbreedte die Wget kan gebruiken voor het downloaden van bestanden op uw systeem:
wget --limit-rate =
Opmerking Houd er rekening mee dat de snelheid wordt vermeld in bytes en niet in bits. Dus als u Wget -limit-rate = 20k gebruikt, wordt het bandbreedtegebruik beperkt tot 20 kB en niet tot 20 kb.
7. Gebruik Wget om bestanden van FTP-servers te downloaden
Als u een bestand van een FTP-server moet downloaden, kunt u dat ook met Wget doen. Gebruik gewoon de volgende opdracht om bestanden van FTP-servers te downloaden:
wget
- Download bestanden van FTP-servers met login
ALS uw FTP-server een login vereist om downloadbestanden toe te staan, kunt u de inloggegevens ook gewoon met Wget doorgeven. Gebruik gewoon het volgende commando:
wget --ftp-gebruikersnaam = GEBRUIKERSNAAM --ftp-wachtwoord = WACHTWOORD
ZIE OOK: 30 Mac Terminal-opdrachten voor toegang tot verborgen functies
Gebruik Wget eenvoudig om bestanden van internet te downloaden
U kunt Wget gebruiken om bestanden overal op internet te downloaden. Hoewel Wget bijna altijd werkt, zijn er bepaalde servers die de toegang tot Wget verhinderen. In dat geval kunt u proberen de -user-agent voor uw Wget-opdracht te wijzigen. Dat is echter geen aanbevolen handelwijze, tenzij u absoluut weet wat u doet. Voor het grootste deel laat Wget je elk bestand van internet downloaden, zolang je er toegang toe hebt, en de URL ervan.
Dus, heb je ooit Wget gebruikt om bestanden van internet te downloaden? Laat ons weten wat uw ervaring is met het gebruik van Wget om bestanden te downloaden via de HTTP-, HTTPS- en FTP-protocollen. Als u andere toepassingen van Wget kent waarvan u denkt dat ze het verdienen om op deze lijst te staan, laat het ons dan weten in de opmerkingen hieronder.
