Dieser Leitfaden gehört zu Technisches SEO für eine Website beherrschen. Im Mittelpunkt stehen praktische Entscheidungen, mit denen öffentliche Seiten leichter gefunden, interpretiert und gepflegt werden können, ohne technische Einstellungen als Ranking-Garantie darzustellen.
Was robots.txt tatsächlich leistet
robots.txt steuert für regelkonforme Bots den Zugriff auf Pfade. Es ist weder ein zuverlässiges Mittel zur Deindexierung noch eine Sicherheitsbarriere. Sensible Inhalte benötigen echte Zugriffskontrollen.
Warum technisches SEO wichtig ist
Technisches SEO reduziert unnötige Mehrdeutigkeiten zwischen Website und Suchmaschine. Es erleichtert das Auffinden dauerhafter URLs, die Wahl der kanonischen Version und eine konsistente Interpretation. Ein Ranking wird dadurch nicht garantiert: Nutzen, Suchintention und Kontext bleiben entscheidend.
Crawling, Indexierung und Ranking
Crawling bedeutet Entdecken und Abrufen. Bei der Indexierung wird ein Dokument verstanden und gegebenenfalls gespeichert. Ranking wählt indexierte Dokumente für eine Suchanfrage aus. Diese Phasen sollten getrennt diagnostiziert werden.
Signale konsistent halten
URL, Canonical, Title, Robots-Anweisungen, strukturierte Daten und interne Links sollten dieselbe Seite beschreiben. Widersprüchliche Signale erzeugen unnötige Konflikte. Eine stabile öffentliche URL sollte konsequent intern verlinkt werden.