So listen Sie alle mit einer Website verknüpften URLs schnell auf

Sie benötigen also eine Liste mit allen URLs für eine Website? Machst du vielleicht einige Weiterleitungen? Das Limit für XML-Sitemaps erreichen? Toll, ich auch. Ich habe genau das Tool für Sie, mit dem Sie es ungefähr mit der gleichen Geschwindigkeit wie XML-Sitemaps erledigen können, aber Sie werden dabei viel cooler aussehen.

Wo das Tutorial tatsächlich beginnt

Um Ihre Liste der URLs zu erhalten, verwenden wir Wget!

Was zum Teufel ist Wget?

"Wget ist ein kostenloses Softwarepaket zum Abrufen von Dateien mit HTTP, HTTPS und FTP, den am häufigsten verwendeten Internetprotokollen." - Brauen Sie Formeln

Sie können damit auch eine große Liste von URLs anfordern, die einer Domain zugeordnet sind

‍1. Wget installieren

Um Wget zu installieren, müssen Sie zuerst HomeBrew installieren, falls Sie dies noch nicht getan haben. aka Brew. ? Brew ist ein Paketmanager, dh er installiert Software für Sie und verwaltet sie. Sie können die Anweisungen auf ihrer Website lesen oder einfach den folgenden folgen.

Installieren Sie Brew

Fügen Sie dies in eine Terminal-Eingabeaufforderung ein und drücken Sie zweimal die Eingabetaste ⮐ (Möglicherweise werden Sie nach einem Passwort gefragt.)

/usr/bin/ruby -e "$(curl -fsSL //raw.githubusercontent.com/Homebrew/install/master/install)"‍

Installieren Sie Wget

Nachdem Sie Brew installiert haben, ist es Zeit, Wget zu installieren. Fügen Sie dies in eine Terminal-Eingabeaufforderung ein und drücken Sie die Eingabetaste ⮐

brew install wget

2. Zeit, 'Dem URLs' zu erhalten

Jetzt, wo Wget installiert ist, laden wir einfach die Website herunter und zeigen dann alle URLs an. Laden Sie zunächst die Website herunter, mit der Sie möchten

Wget -r www.shutterandcode.com

Sobald der Download abgeschlossen ist, werden die URLs mit aufgelistet

Find www.shutterandcode.com

(Stellen Sie sicher, dass Sie dieselbe Website-Domain verwenden, die heruntergeladen wurde.)

Fazit

Nach einer Reihe von gelegentlichen Tests, bei denen Wget mit XML-Sitemaps auf kleineren Websites verglichen wurde, stellte ich fest, dass beide ziemlich gleichwertig sind. Gelegentlich war einer schneller als der andere, aber insgesamt hatten beide ähnliche Geschwindigkeiten

Wenn Sie mehr über Wget-Befehle erfahren möchten, geben Sie dies einfach in Ihre Eingabeaufforderung ein

wget --help

Ich hoffe es hat euch Spaß gemacht! Vergessen Sie nicht zu mögen, zu kommentieren und zu abonnieren! ?

ps fühlen sich eigentlich nicht verpflichtet zu mögen, zu kommentieren oder zu abonnieren, weil es einfach ein Witz für YouTubers ist :)

UPDATE: Wenn Sie nicht möchten, dass die Site tatsächlich auf Ihren Computer heruntergeladen wird, fügen Sie nach 'wget' wie '- spider' hinzu
wget -r --spider www.example.com

Schauen Sie sich den Originalbeitrag und den Rest der Snippets an! Serie bei

Shutter & Code - Le Blog