Der Crawler liest eine Sitemap.xml-Datei ein und speichert den Inhalt jeder gefundenen URL in der Datenbank zur weiteren Analyse.

So funktioniert's

1. Gib die URL zur Sitemap.xml der Website ein, die du analysieren möchtest
2. Der Crawler liest alle URLs aus der Sitemap
3. Jede URL wird aufgerufen und der Inhalt gespeichert
4. Die Daten stehen dir anschließend für SEO-Analysen zur Verfügung