Slik trekker du ut koblinger fra hvilken som helst nettside ved hjelp av PowerShell

Innholdsfortegnelse:

Slik trekker du ut koblinger fra hvilken som helst nettside ved hjelp av PowerShell
Slik trekker du ut koblinger fra hvilken som helst nettside ved hjelp av PowerShell
Anonim
PowerShell 3 har mange nye funksjoner, inkludert noen kraftige nye webrelaterte funksjoner. De forenkler dramatisk automatisering av nettet, og i dag skal vi vise deg hvordan du kan trekke ut hver enkelt kobling fra en nettside, og eventuelt laste ned ressursen hvis du ønsker det.
PowerShell 3 har mange nye funksjoner, inkludert noen kraftige nye webrelaterte funksjoner. De forenkler dramatisk automatisering av nettet, og i dag skal vi vise deg hvordan du kan trekke ut hver enkelt kobling fra en nettside, og eventuelt laste ned ressursen hvis du ønsker det.

Skraping på nettet med PowerShell

Det er to nye cmdlets som gjør det enklere å automatisere nettet, Invoke-WebRequest som gjør det enklere å tolke menneskelig lesbart innhold, og Invoke-RestMethod som gjør maskinlesbart innhold lettere å lese. Siden koblinger er en del av HTML-en til en side, er de en del av det menneskelige lesbare materialet. Alt du trenger å gjøre for å få en nettside, er å bruke Invoke-WebRequest og gi den en nettadresse.

Invoke-WebRequest –Uri ‘https://howtogeek.com’
Hvis du ruller ned, ser du svaret har en koblingsegenskap, vi kan bruke PowerShell 3s nye medlemsregistreringsfunksjon for å filtrere disse ut.
Hvis du ruller ned, ser du svaret har en koblingsegenskap, vi kan bruke PowerShell 3s nye medlemsregistreringsfunksjon for å filtrere disse ut.

(Invoke-WebRequest –Uri ‘https://howtogeek.com’).Links
Som du kan se, får du mange lenker tilbake, dette er hvor du må bruke fantasien din til å finne noe unikt å filtrere ut koblingene du leter etter. La oss anta at vi vil ha en liste over alle artikler på forsiden.
Som du kan se, får du mange lenker tilbake, dette er hvor du må bruke fantasien din til å finne noe unikt å filtrere ut koblingene du leter etter. La oss anta at vi vil ha en liste over alle artikler på forsiden.

((Invoke-WebRequest –Uri ‘https://howtogeek.com’).Links | Where-Object {$_.href -like “http*”} | Where class -eq “title”).Title
En annen flott ting du kan gjøre med de nye cmdlets er å automatisere hverdagsnedlastinger. Vi ser på å automatisk skrape bildet på dagen utenfor Nat Geo-nettstedet. For å gjøre dette kombinerer vi de nye web-cmdletene med Start-BitsTransfer.
En annen flott ting du kan gjøre med de nye cmdlets er å automatisere hverdagsnedlastinger. Vi ser på å automatisk skrape bildet på dagen utenfor Nat Geo-nettstedet. For å gjøre dette kombinerer vi de nye web-cmdletene med Start-BitsTransfer.

$IOTD = ((Invoke-WebRequest -Uri ‘https://photography.nationalgeographic.com/photography/photo-of-the-day/’).Links | Where innerHTML -like “*Download Wallpaper*”).href Start-BitsTransfer -Source $IOTD -Destination C:IOTD

Det er alt der er til det. Har du noen fine triks? Gi oss beskjed i kommentarene.

Anbefalt:

Kart hvilken som helst nøkkel til hvilken som helst nøkkel på Windows 10, 8, 7 eller Vista

Kart hvilken som helst nøkkel til hvilken som helst nøkkel på Windows 10, 8, 7 eller Vista

Hvis du er lei av måten enkelte nøkler på systemet ditt fungerer på, kan du omkjøre dem til å fungere som en annen nøkkel ved å bruke et gratis verktøy kalt SharpKeys. Slik fungerer det.

Fra Tips-boksen: Utvinning av lyd fra hvilken som helst video ved hjelp av VLC, Sneaking Around Paywalls, og Forsinkelse av Windows Live Mesh Under Boot.

Fra Tips-boksen: Utvinning av lyd fra hvilken som helst video ved hjelp av VLC, Sneaking Around Paywalls, og Forsinkelse av Windows Live Mesh Under Boot.

Hver uke graver vi inn i leserens mailbag og deler tipsene og triksene du sender inn. Denne uken fremhever vi hvordan du fjerner lyd fra en hvilken som helst videofil med VLC, sniker seg om nyhetssider, og hvordan du forsinker Windows Live Mesh fra laster med en gang.

Slik deles linker mellom hvilken som helst nettleser og hvilken som helst smarttelefon

Slik deles linker mellom hvilken som helst nettleser og hvilken som helst smarttelefon

Det skjer hele tiden, du finner en artikkel å lese, men da kalles naturen. Tar du den bærbare datamaskinen med deg? Med nettsted til telefon kan du dele koblinger mellom hvilken som helst nettleser og en hvilken som helst smarttelefon med et enkelt klikk.

Skriv ut filer fra hvor som helst via hvilken som helst enhet med Dropbox

Skriv ut filer fra hvor som helst via hvilken som helst enhet med Dropbox

Har du noen gang ønsket å skrive ut noe fra iPhone, eller trengte du å skrive ut noe på kontorprinteren fra din netbook hjemme? Slik gjør du Dropbox til en kvasi virtuell utskriftsserver.

Opprett innfødt Windows-applikasjon av en hvilken som helst nettside ved hjelp av Nativefier.

Opprett innfødt Windows-applikasjon av en hvilken som helst nettside ved hjelp av Nativefier.

Nativefier er et åpen kildekode kommandolinjeverktøy som lar deg lage innfødte skrivebordsprogrammer for alle nettsider eller nettsider på Windows, Mac og Linux. Du kan gjøre hvilken som helst nettside en app ved hjelp av den.