Sie haben eine neue Website erstellen lassen, Ihre Leistungen beschrieben, Fotos eingefügt und alles online gestellt. Monate später suchen Sie Ihr Unternehmen bei Google, und Ihre Unterseiten tauchen nicht auf. Vielleicht erscheint nur die Startseite, aber weder „Leistungen“ noch „Kontakt“. Und das Telefon klingelt seltener als erhofft.
Dahinter stecken oft zwei kleine Dateien: eine Sitemap und die Robots.txt. Die Namen klingen technisch, die Aufgaben sind einfach. Die eine sagt Google: „Das sind meine Seiten.“ Die andere sagt: „Bitte betreten Sie diese Bereiche nicht.“ Sind sie falsch eingestellt, kann Ihre gesamte Website vor Google verborgen sein. In diesem Beitrag erkläre ich, was eine Sitemap ist, warum sie wichtig ist und was Sie selbst prüfen können.
Was ist eine Sitemap? Eine Seitenliste für Google
Stellen Sie sich einen Gast vor, der zum ersten Mal in ein Hotel kommt. Bekommt er an der Rezeption eine Liste mit Zimmernummern und Etagen, findet er sich sofort zurecht. Ohne Liste läuft er durch die Flure, und manche Zimmer sieht er nie.
Eine Sitemap ist genau diese Liste. Wenn die Roboter von Google (automatische Besucher, die Websites lesen) Ihre Seite durchsuchen, schauen sie auf die Liste und erfahren, welche Seiten es gibt und welche sich zuletzt geändert haben. Sie entsteht automatisch, Besucher sehen sie nicht, sie ist nur für Suchmaschinen gedacht.
Bei einer kleinen, übersichtlichen Website findet Google die meisten Seiten oft auch ohne Liste. Wenn Sie aber regelmäßig neue Seiten hinzufügen, manche Seiten nicht im Menü verlinkt sind oder die Website neu ist, macht die Liste einen echten Unterschied.
Was ist die Robots.txt? Ein Schild an der Tür
Im selben Hotel hängt an manchen Türen ein Schild: „Nur für Personal.“ Wäscherei, Heizungsraum, Lager. Die Robots.txt ist ein solches Schild an der Haustür Ihrer Website. Kommen die Roboter von Google, lesen sie es zuerst und gehen nicht in die Bereiche, die man ihnen verbietet.
Das hat sinnvolle Anwendungen. Ihren Verwaltungsbereich, die Warenkorbseite oder einen Testbereich möchten Sie nicht bei Google sehen. Problematisch wird es, wenn das Schild falsch beschriftet ist. Schreiben Sie „Zutritt für niemanden“ an die Haupttür, schließen Sie das ganze Hotel, nicht nur ein Zimmer. Genau darum geht es im nächsten Abschnitt.
Wie eine falsche Einstellung die ganze Website verbirgt
Das sehe ich regelmäßig. Während die Website gebaut wird, sperrt die Entwicklerin oder der Entwickler die Roboter komplett aus, damit Google die unfertige Seite nicht sieht. Das ist vernünftig. Wird die Sperre beim Start aber nicht aufgehoben, wirkt Ihre Website jahrelang normal und taucht bei Google nie auf.
Ähnlich ist es bei manchen Verwaltungsoberflächen mit einem Kästchen wie „Suchmaschinen davon abhalten, diese Website zu indexieren“. Bleibt es angehakt, ist das Ergebnis dasselbe.
Von außen bemerken Sie das nicht. Wenn Sie Ihre Website öffnen, sieht alles normal aus, denn die Sperre gilt nur für Roboter. Deshalb sind regelmäßige Kontrollen wichtig.
Überlegen Sie, was das kostet. Eine Patientin sucht einen Termin und googelt „Zahnarzt in meiner Nähe“. Selbst wenn auf Ihrer Website alles stimmt, listet Google Ihre Seiten nicht, also findet sie Ihren Mitbewerber und ruft dort an. Sie erfahren es nie, denn wer nicht angerufen hat, meldet sich auch nicht. „Meine Seite öffnet sich, also ist alles gut“ täuscht. Eine Website, die sich öffnet, und eine Website, die Google sehen kann, sind zwei verschiedene Dinge.
Ein kurzer Überblick:
| Situation | Folge |
|---|---|
| Keine Sitemap | Google findet manche Seiten spät oder gar nicht |
| Veraltete Sitemap | Gelöschte Seiten stehen noch drin, neue fehlen |
| Das Türschild sperrt die ganze Website | Ihre Website erscheint nicht bei Google |
| Richtig eingerichtet | Google findet Ihre wichtigen Seiten und lässt Unnötiges aus |
Was Sie selbst prüfen können
Drei Kontrollen brauchen kein technisches Wissen.
Die „site:“-Suche bei Google
Geben Sie in das Suchfeld von Google site: ein und direkt danach, ohne Leerzeichen, Ihre Domain (Internetadresse), zum Beispiel site:ihrefirma.de. Google listet die Seiten auf, die es von Ihrer Website kennt.
- Gar keine Ergebnisse bedeuten, dass Google Ihre Website noch nicht sieht. Das ist dringend.
- Deutlich weniger Ergebnisse als tatsächliche Seiten bedeuten, dass Seiten fehlen.
- Alte, unbekannte oder unpassende Seiten deuten auf Aufräumbedarf hin.
Die Seitenanzahl in der Search Console
Die Search Console ist das kostenlose Werkzeug von Google. Nachdem Sie bestätigt haben, dass die Website Ihnen gehört, zeigt der Bereich „Seiten“, wie viele Ihrer Seiten Google kennt und warum andere fehlen. Unter „Sitemaps“ sehen Sie, ob Ihre Liste an Google gesendet und gelesen wurde.
Ein Warnzeichen: Steht bei einer Seite, die Kunden bringen soll, etwa „Durch robots.txt blockiert“, zeigen Sie das sofort Ihrer Fachperson.
Das Kästchen im Verwaltungsbereich
Wenn Sie Ihre Website über eine Oberfläche im Stil von WordPress verwalten, suchen Sie in den Einstellungen nach einer Option, die Suchmaschinen abhält. Wenn Sie unsicher sind, ändern Sie nichts. Machen Sie einen Screenshot und schicken Sie ihn Ihrer Fachperson.
Was die Fachperson erledigt
Das ist der technische Teil, den Sie nicht selbst machen müssen:
- Die Sitemap erstellen und dafür sorgen, dass sie sich mit der Website automatisch aktualisiert
- Sie in der Search Console anmelden
- Das Türschild prüfen und nur sperren, was wirklich verborgen bleiben soll
- Seiten aus der Liste entfernen, die dort nicht hingehören, etwa Dankeseiten, Duplikate und gelöschte Seiten
- Dafür sorgen, dass bei Relaunch oder Umzug keine alten Seiten in der Liste bleiben
- Nach größeren Änderungen alles erneut kontrollieren
Was Sie Ihre Fachperson fragen sollten
- „Haben wir eine Sitemap, und wurde sie in der Search Console eingereicht?“
- „Welche Bereiche haben Sie in der Robots.txt gesperrt, und warum?“
- „Wie haben Sie bestätigt, dass die Roboter-Sperre beim Start aufgehoben wurde?“
- „Aktualisiert sich die Sitemap von selbst, wenn wir eine Seite hinzufügen?“
- „Wie viele Seiten zeigt die Search Console für uns, und warum fehlen die übrigen?“
Wer diese Fragen nicht gelassen beantworten kann, hat das Thema womöglich nie geprüft.
Wie lange dauert es?
Bei den meisten kleinen und mittleren Websites sind Einrichtung und Kontrolle schnell erledigt. Das eigentliche Warten gilt Google, das Ihre Seiten erneut besuchen muss. Das kann einige Tage oder einige Wochen dauern; eine genaue Zeit kann niemand nennen. Eine Sitemap beschleunigt, garantiert aber kein Ergebnis.
Häufig gestellte Fragen
Erscheint meine Website nicht bei Google, wenn ich keine Sitemap habe?
Sie kann trotzdem erscheinen. Google findet Seiten auch über Links von anderen Seiten. Die Liste hilft aber, dass Seiten zuverlässiger und schneller gefunden werden, besonders bei neuen oder großen Websites.
Kann ich die Robots.txt selbst bearbeiten?
Ich würde davon abraten. Eine einzige falsche Zeile kann die ganze Website aus Google entfernen. Sie dürfen hineinschauen, holen Sie aber vor einer Änderung fachlichen Rat ein.
Verbessert eine Sitemap mein Ranking?
Nicht direkt. Sie hilft Google zu erfahren, dass Ihre Seiten existieren. Das Ranking hängt von der Qualität Ihrer Inhalte und von Ihren Mitbewerbern ab.
Ich vermute, dass meine Website bei Google nicht erscheint. Was tue ich zuerst?
Machen Sie zuerst die site:-Suche, dann schauen Sie in die Search Console. Sieht das Ergebnis schlecht aus, geben Sie Ihre Beobachtungen an Ihre Fachperson weiter.
Fazit
Um bei Google zu erscheinen, muss Google zuerst alle Türen Ihrer Website öffnen können. Eine kleine Kontrolle kann eine Sperre aufdecken, die monatelang unbemerkt blieb. Wenn Sie den Zustand Ihrer Website gemeinsam prüfen möchten, erreichen Sie mich über meine Seite SEO-Beratung.