Das Tool CrawlScore ist ein kostenloser Sitemap Generator und analysiert Websites auf diverse SEO und Usability relevante Faktoren.

Bei der Auswertung stehen diese Reports zur Verfügung:

Zusammenfassung

• Executive
  
• Technisch
  

Sichtbarkeit und Status

• 200
• 301
• 302
• 404
  
• 500
• Anderer Status

Crawlfreundlichkeit

• Interne Links
  
• No Follow Links
• Seiten über 50k
• Seiten über 30 k

Seiten Optimierung

• Doppelte Titel
• Doppelte Meta-Keywords
• Doppelte Meta-Descriptions

Bei den Sitemaps stehen folgende Kategorien zur Auswahl:

• Google Sitemap
• Yahoo! Sitemap
• ROR Sitemap
• HTML Sitemap

Im Account eingetragene Seiten werden alle 2 Wochen erneut gecrawlt. Da man sich nicht als Seiteninhaber identifizieren muss finde ich es recht gewagt, dass man eine Unterdrückung der Robots.txt einstellen kann.
Dadurch fällt der Bot leider in der Kategorie derer, die sich nicht benehmen können.

Mit CrawlScore kann man außerdem…

• …eine allgemeine Analyse der Konkurrenz durchführen.
• …unter Zuhilfenahme des Internal Link Tools die intern am besten verlinkten Unterseiten finden (Stichwort Linktausch, -kauf und -miete).
• …Traffic bei der Kon auf den eigenen Seiten verursachen.
• …Pageimpressions auf Seiten mit ohne Werbung faken.

Danke für den Hinweis an Jason Bartholme