4 minTechnische Optimierung für den Labrador-Index
Labrador lehnt Seiten über 4 MB ab, führt kein JavaScript aus und benötigt eine Freigabe des OAI-SearchBot. noindex und Cache-Control werden dagegen vollständig ignoriert.
Die sechs technischen Grenzen
Für Webseiten gelten im Labrador-Index eigene technische Regeln, die sich deutlich von denen klassischer Suchmaschinen unterscheiden. Sie entscheiden nicht über die Platzierung, sondern über die Aufnahme: Wird eine dieser Grenzen verletzt, fehlt die Seite im Index ganz oder in wesentlichen Teilen.
robots.txt und Crawler-Freigabe
Für die Erfassung im Suchindex ist der OAI-SearchBot zuständig. Ist dieser Crawler in der robots.txt gesperrt, kann die Seite nicht im Index landen – unabhängig davon, wie gut sie inhaltlich optimiert ist. Zusätzlich sollte der GPTBot nicht blockiert sein, weil OpenAI auch über ihn Datenbestände aufbaut.
User-agent: OAI-SearchBot
Allow: /
User-agent: GPTBot
Allow: /
# Bei Bedarf gezielt einzelne Verzeichnisse ausschließen:
# Disallow: /interner-bereich/Häufige Stolperfalle: Viele Websites haben KI-Crawler in der Vergangenheit pauschal ausgesperrt, um Trainingsdaten-Nutzung zu verhindern. Genau diese Regel verhindert heute die Aufnahme in den Suchindex. Wer über ChatGPT gefunden werden will, muss den OAI-SearchBot bewusst zulassen.
HTML statt JavaScript
Der Labrador-Crawler führt kein JavaScript aus. Inhalte, die dynamisch nachgeladen werden und nicht direkt im ausgelieferten HTML-Code enthalten sind, werden ignoriert und tauchen im Index nicht auf. Das betrifft insbesondere client-seitig gerenderte Single-Page-Anwendungen, nachgeladene Tab-Inhalte, Accordion-Texte und per Skript eingebundene Produktdaten.
Für die Praxis heißt das: Alle Inhalte, die ChatGPT kennen soll – vor allem der erste Absatz unter der H1 – müssen im Quelltext stehen. Server-seitiges Rendering oder statische Auslieferung lösen das Problem zuverlässig.
Die 4-MB-Grenze
Webseiten mit einer Gesamtgröße von über 4 MB werden von ChatGPT vollständig abgelehnt. Es gibt keinen Teil-Import. Typische Ursachen für das Überschreiten sind unkomprimierte Bilder, eingebettete Videos, umfangreiche Schriftpakete und große Inline-Skripte.
- Bilder in modernen Formaten ausliefern und auf die tatsächlich benötigte Auflösung begrenzen
- Schriften auf die verwendeten Schnitte reduzieren
- Inline-Skripte und -Styles auslagern oder verkleinern
- Seitengröße nach jedem größeren Relaunch erneut prüfen
Alt-Texte in der Markdown-Konvertierung
Labrador speichert abgerufene Seiten als Markdown im Lese-Cache. Alt-Texte bleiben bei dieser Umwandlung als Textinformation erhalten – besonders im oberen Seitenbereich sind sie deshalb ein zusätzlicher inhaltlicher Kanal. Fehlen sie, geht der Informationsgehalt von Grafiken für die Erfassung vollständig verloren.
Formulierungshinweis: Alt-Texte sollten den Bildinhalt in einem vollständigen Satz beschreiben und dabei Fachbegriffe verwenden, die zur Seite passen – nicht „Grafik 1“ oder „Header-Bild“, sondern etwa „Ablaufdiagramm der ISO-27001-Zertifizierung in fünf Phasen“.
Sieben typische Fehler
| Fehler | Wirkung |
|---|---|
| OAI-SearchBot in der robots.txt gesperrt | Seite fehlt vollständig im Index |
| Kerninhalte per JavaScript nachgeladen | Inhalt existiert für Labrador nicht |
| Seitengröße über 4 MB | Seite wird komplett abgelehnt |
| Breadcrumbs, Datum und Widgets direkt nach der H1 | Kernaussage fällt aus dem 200-Zeichen-Snippet |
| Kernbotschaft nur in der Meta Description | Im kostenlosen Modus unsichtbar |
| Fehlende Alt-Texte bei relevanten Grafiken | Bildinhalte gehen bei der Konvertierung verloren |
| Verlass auf noindex zur Steuerung | Wirkungslos – Steuerung nur über robots.txt |
So prüfen Sie Ihre Seiten
- robots.txt aufrufen und nach Regeln für
OAI-SearchBotundGPTBotsuchen. - Quelltext statt gerenderter Ansicht prüfen: Im Browser den Quelltext anzeigen und kontrollieren, ob der erste Absatz unter der H1 dort tatsächlich steht.
- Seitengröße messen: In den Entwicklertools im Netzwerk-Tab die übertragene Gesamtgröße der Seite ablesen.
- Snippet-Test in ChatGPT: In der kostenlosen Version eine konkrete Frage zum Angebot stellen und prüfen, ob und mit welchem Text die eigene Seite als Quelle erscheint.
Häufige Fragen
Welcher Crawler ist für den ChatGPT-Suchindex zuständig?
Der OAI-SearchBot. Zusätzlich sollte der GPTBot nicht blockiert sein. Ist einer dieser Crawler in der robots.txt gesperrt, kann die Seite nicht in den Labrador-Index gelangen.
Wie groß darf eine Seite sein?
Maximal 4 MB Gesamtgröße. Seiten darüber werden vollständig abgelehnt, einen teilweisen Import gibt es nicht.
Verarbeitet Labrador JavaScript?
Nein. Dynamisch nachgeladene Inhalte, die nicht im reinen HTML enthalten sind, werden ignoriert und tauchen im Index nicht auf.
Wirkt ein noindex-Tag gegenüber Labrador?
Nein. noindex und Cache-Control werden ignoriert. Die Steuerung läuft ausschließlich über die robots.txt.
Technischer GEO-Check Ihrer Domain
Wir prüfen Crawler-Freigaben, Seitengrößen und HTML-Verfügbarkeit Ihrer wichtigsten Templates.
Beratung anfragen