de.phhsnews.com


de.phhsnews.com / So extrahieren Sie Links auf jeder beliebigen Seite mithilfe von PowerShell

So extrahieren Sie Links auf jeder beliebigen Seite mithilfe von PowerShell


PowerShell 3 verfügt über viele neue Funktionen, einschließlich einiger leistungsstarker neuer webbezogener Funktionen. Sie vereinfachen die Automatisierung des Webs erheblich und heute zeigen wir Ihnen, wie Sie jeden einzelnen Link einer Webseite extrahieren und optional die Ressource herunterladen können.

Scraping des Webs mit PowerShell

Es gibt zwei neue Cmdlets, die das Web einfacher automatisieren, Invoke-WebRequest, das das Analysieren von lesbaren Inhalten erleichtert, und Invoke-RestMethod, das maschinenlesbaren Inhalt leichter lesbar macht. Da Links Teil des HTML einer Seite sind, sind sie Teil des menschenlesbaren Materials. Alles, was Sie tun müssen, um eine Webseite zu erhalten, ist Invoke-WebRequest und geben Sie ihm eine URL.

Invoke-WebRequest -Uri '//phhsnews.com'

Wenn Sie nach unten scrollen, sehen Sie die Antwort Als Eigenschaft für Links können wir die neue Elementauflistungsfunktion von PowerShell 3 verwenden, um diese herauszufiltern.

(Invoke-WebRequest -Uri '//phhsnews.com') .Links

Wie Sie sehen, bekommen Sie eine Menge der Links zurück, das ist, wo Sie Ihre Phantasie verwenden müssen, um etwas einzigartiges zu finden, um die Verbindungen herauszufiltern, die Sie suchen. Nehmen wir an, wir wollen eine Liste aller Artikel auf der Titelseite.

((Invoke-WebRequest -Uri '//phhsnews.com') .Links | Where-Objekt {$ _. Href -like "http * "} | Wo class -eq" title "). Titel

Eine weitere tolle Sache, die Sie mit den neuen Cmdlets machen können, ist die Automatisierung alltäglicher Downloads. Schauen wir uns an, wie wir automatisch das Bild des Tages von der Nat Geo Website abkratzen, dazu kombinieren wir die neuen Web-Cmdlets mit Start-BitsTransfer.

$ IOTD = ((Invoke-WebRequest -Uri ' // photography.nationalgeographic.com/photography/photo-of-the-day/').Links | Wo innerHTML ähnlich "* Wallpaper herunterladen *". href
Start-BitsTransfer -Quelle $ IOTD -Destination C: IOTD

Das ist alles. Haben Sie irgendwelche eigenen Tricks? Lassen Sie es uns in den Kommentaren wissen.


So verwenden Sie den neuen Task-Manager in Windows 8 oder 10

So verwenden Sie den neuen Task-Manager in Windows 8 oder 10

Der Task-Manager in Windows 8 und 10 wurde komplett überarbeitet. Es ist benutzerfreundlicher, schlanker und bietet mehr Funktionen als je zuvor. Windows 8 mag alles über Metro sein, aber der Task-Manager und der Windows-Explorer sind besser als je zuvor. Der Task-Manager verwaltet jetzt Autostart-Programme, zeigt Ihre IP-Adresse an und zeigt schlanke Ressourcennutzungsgraphen an.

(how-to)

How-To Geek sucht einen Sicherheits-Writer

How-To Geek sucht einen Sicherheits-Writer

Denken Sie, Sie haben die perfekte Kombination aus Geek-Wissen und Schreibfähigkeiten? Wir suchen einen erfahrenen, auf Sicherheit ausgerichteten Autor, der unserem Team beitritt. Was wir suchen Wir suchen einen erfahrenen Autor und Sicherheitsexperten, um Anleitungen und Erklärer in diesem Bereich zu behandeln von infosec aus Sicht des Verbrauchers.

(how-to)