Guides & Tipps

Der WebDoctor-Blog

Praxisnahe Guides zu Sitemaps, Crawling und technischer Website-Gesundheit – geschrieben, um umgesetzt zu werden.

robots.txt

robots.txt für KI-Crawler: Erlauben und Sperren

Drei Rezepte und eine Tabelle Bot für Bot, um GPTBot, ClaudeBot, PerplexityBot und die übrigen aus einer kleinen Textdatei zu steuern.

22. Juli 2026 · 3 Min. Lesezeit
Sitemaps

XML-Sitemap-Fehler beheben: Ursachen und Lösungen

Die meisten Sitemap-Fehler gehen auf eine Handvoll wiederkehrender Ursachen zurück. Dieser Guide zeigt für jede das Symptom, die Ursache und die konkrete Korrektur.

16. Juli 2026 · 5 Min. Lesezeit
Sitemaps

XML-Sitemap-Best-Practices: Was hineingehört

Eine gute Sitemap ist kurz, ehrlich und aktuell: nur kanonische, indexierbare Seiten, verlässliche lastmod-Werte und ein sauberer Weg, auf dem Suchmaschinen sie finden.

16. Juli 2026 · 5 Min. Lesezeit
Sitemaps

Sitemap-Index erklärt: Wann und wie Sie ihn nutzen

Sobald eine Website die Grenzen einer einzelnen Sitemap sprengt – oder Sie Ordnung nach Inhaltstyp wollen –, übernimmt eine Index-Datei. So funktioniert sie.

16. Juli 2026 · 5 Min. Lesezeit
llms.txt

Was ist llms.txt – und braucht Ihre Website die Datei?

Eine kleine Markdown-Datei im Stammverzeichnis sagt KI-Systemen, was Ihre Website ist und welche Seiten zählen. So funktioniert sie – und dann lohnt sie sich.

16. Juli 2026 · 3 Min. Lesezeit
KI-Suche

AI-Readiness: So zitieren ChatGPT und Perplexity Sie

KI-Assistenten empfehlen nur Websites, die sie crawlen, verstehen und einordnen können. Das sind drei getrennte Probleme – und die meisten Sites scheitern an mindestens einem, ohne es zu wissen.

16. Juli 2026 · 3 Min. Lesezeit