de.phhsnews.com


de.phhsnews.com / So extrahieren Sie Links auf jeder beliebigen Seite mithilfe von PowerShell

So extrahieren Sie Links auf jeder beliebigen Seite mithilfe von PowerShell


PowerShell 3 verfügt über viele neue Funktionen, einschließlich einiger leistungsstarker neuer webbezogener Funktionen. Sie vereinfachen die Automatisierung des Webs erheblich und heute zeigen wir Ihnen, wie Sie jeden einzelnen Link einer Webseite extrahieren und optional die Ressource herunterladen können.

Scraping des Webs mit PowerShell

Es gibt zwei neue Cmdlets, die das Web einfacher automatisieren, Invoke-WebRequest, das das Analysieren von lesbaren Inhalten erleichtert, und Invoke-RestMethod, das maschinenlesbaren Inhalt leichter lesbar macht. Da Links Teil des HTML einer Seite sind, sind sie Teil des menschenlesbaren Materials. Alles, was Sie tun müssen, um eine Webseite zu erhalten, ist Invoke-WebRequest und geben Sie ihm eine URL.

Invoke-WebRequest -Uri '//phhsnews.com'

Wenn Sie nach unten scrollen, sehen Sie die Antwort Als Eigenschaft für Links können wir die neue Elementauflistungsfunktion von PowerShell 3 verwenden, um diese herauszufiltern.

(Invoke-WebRequest -Uri '//phhsnews.com') .Links

Wie Sie sehen, bekommen Sie eine Menge der Links zurück, das ist, wo Sie Ihre Phantasie verwenden müssen, um etwas einzigartiges zu finden, um die Verbindungen herauszufiltern, die Sie suchen. Nehmen wir an, wir wollen eine Liste aller Artikel auf der Titelseite.

((Invoke-WebRequest -Uri '//phhsnews.com') .Links | Where-Objekt {$ _. Href -like "http * "} | Wo class -eq" title "). Titel

Eine weitere tolle Sache, die Sie mit den neuen Cmdlets machen können, ist die Automatisierung alltäglicher Downloads. Schauen wir uns an, wie wir automatisch das Bild des Tages von der Nat Geo Website abkratzen, dazu kombinieren wir die neuen Web-Cmdlets mit Start-BitsTransfer.

$ IOTD = ((Invoke-WebRequest -Uri ' // photography.nationalgeographic.com/photography/photo-of-the-day/').Links | Wo innerHTML ähnlich "* Wallpaper herunterladen *". href
Start-BitsTransfer -Quelle $ IOTD -Destination C: IOTD

Das ist alles. Haben Sie irgendwelche eigenen Tricks? Lassen Sie es uns in den Kommentaren wissen.


Erstellen Sie ein bootfähiges USB-Wiederherstellungslaufwerk in Windows 8/10

Erstellen Sie ein bootfähiges USB-Wiederherstellungslaufwerk in Windows 8/10

Gestern schrieb ich darüber, wie Sie mit verschiedenen Methoden in die Systemwiederherstellungsoptionen von Windows booten können. Es gibt zwei Methoden zum Laden von Windows und die andere Methode ist, wenn Windows die Wiederherstellungsoptionen automatisch lädt, wenn Windows nicht ordnungsgemäß geladen werden kann.Das

(How-to)

So installieren Sie Microsoft PowerShell unter Linux oder OS X

So installieren Sie Microsoft PowerShell unter Linux oder OS X

PowerShell ist jetzt Open Source und für Linux und Mac verfügbar. Sie können offizielle Pakete von Microsoft für die 64-Bit-Versionen von Ubuntu 16.04, Ubuntu 14.04, CentOS 7, Red Hat Enterprise Linux 7 und Mac OS X 10.11 herunterladen. Laden Sie die Pakete von Microsoft herunter Besuchen Sie das PowerShell-Projekt Gibt die Seite auf GitHub frei, um die Pakete zu finden.

(how-to)