Maschinenlesbarkeitsindex Türkei.
- gemessene Websites
- 500
- antwortend
- 412
- Messdatum
- Stichprobenliste
- Tranco 26Y29
Startseite, robots.txt und llms.txt der ersten 500 Domains mit der Endung .tr auf der Tranco-Beliebtheitsliste, am selben Tag mit derselben Methode gemessen: was KI-Crawlern erklärt wird, wie der Server ihnen tatsächlich antwortet und welche Struktursignale Suchmaschinen erhalten. Keine Urteile; nur Zählungen, Methode und Daten.
Ergebnisse
- Von den 412 antwortenden Websites weisen 31 (7,5 %) mindestens einen KI-Crawler am Server ab, während dieselbe Adresse einem gewöhnlichen Browser und einer bot-förmigen Kontrollsonde antwortet.
- Das häufigste Muster: nur GPTBot und ClaudeBot abweisen. 18 der 31 Websites weisen diese beiden Crawler ab und lassen OAI-SearchBot und PerplexityBot zu. Laut der eigenen Dokumentation der Unternehmen sammeln die ersten beiden Inhalte für ein mögliches Modelltraining, während die anderen beiden Websites in Suchergebnissen zeigen.
- Von den 31 Websites, die am Server sperren, senden 23 einen Cloudflare-Server-Header; ebenso 17 der 18 Websites, die nur GPTBot und ClaudeBot abweisen.
- Auf 18 Websites erlaubt die robots.txt den Crawler, den der Server abweist: Die Erklärung in der Datei und die Antwort des Servers gehen auseinander. Die Sperre zusätzlich in der robots.txt erklären 5 Websites.
- 89 Websites (21,6 %) veröffentlichen eine llms.txt nach dem Vorschlag von llmstxt.org, also eine Textdatei, deren erste Zeile eine Überschrift erster Ebene ist; der Anteil liegt bei com.tr bei 28,8 %, bei gov.tr bei 19,0 % und bei edu.tr bei 5,3 %. Die Wirkung der Datei ist nicht Gegenstand dieser Messung; gezählt wurden nur Vorhandensein und Format.
- Der Anteil der Websites mit strukturierten Daten (JSON-LD) auf der Startseite beträgt 45,4 %: 60,3 % bei com.tr und 20,3 % bei gov.tr. Das lang-Attribut, das die Sprache der Startseite angibt, fehlt bei 21 der 79 gov.tr-Websites.
- Der Anteil der Websites, die die Sprachversionen ihrer Seiten per hreflang angeben, beträgt 19,4 %, x-default nutzen 9,5 %; der höchste Anteil liegt bei edu.tr: 25,0 %.
Nach Domain-Endung
In jeder Spalte ist der Nenner die Zahl der antwortenden Websites mit dieser Endung (die Zahl in der Kopfzeile). com.tr ist die Endung für Unternehmen, gov.tr für Behörden und edu.tr für Hochschulen; die letzte Spalte fasst org.tr, net.tr, bel.tr und die übrigen .tr-Endungen zusammen.
| Messung | Alle · 412 | com.tr · 219 | gov.tr · 79 | edu.tr · 76 | übrige .tr · 38 |
|---|---|---|---|---|---|
| trägt eine gültige robots.txt | 82,5 % | 92,2 % | 70,9 % | 72,4 % | 71,1 % |
| nennt eine Sitemap in der robots.txt | 57,8 % | 76,7 % | 31,6 % | 28,9 % | 60,5 % |
| trägt JSON-LD auf der Startseite | 45,4 % | 60,3 % | 20,3 % | 28,9 % | 44,7 % |
| gibt auf der Startseite eine kanonische URL an | 59,5 % | 77,6 % | 27,8 % | 42,1 % | 55,3 % |
| trägt auf der Startseite ein lang-Attribut | 89,3 % | 93,2 % | 73,4 % | 94,7 % | 89,5 % |
| trägt einen hreflang-Satz | 19,4 % | 23,7 % | 5,1 % | 25,0 % | 13,2 % |
| trägt x-default im hreflang-Satz | 9,5 % | 13,2 % | 0,0 % | 10,5 % | 5,3 % |
| sendet einen HSTS-Header | 55,1 % | 61,2 % | 59,5 % | 42,1 % | 36,8 % |
| stellt eine llms.txt im llmstxt.org-Format bereit | 21,6 % | 28,8 % | 19,0 % | 5,3 % | 18,4 % |
| sperrt mindestens einen KI-Crawler in der robots.txt | 5,3 % | 7,8 % | 2,5 % | 1,3 % | 5,3 % |
| weist mindestens einen KI-Crawler am Server ab | 7,5 % | 12,3 % | 0,0 % | 2,6 % | 5,3 % |
Pro Crawler
Die Erklärung ist eine Sperre ab der Wurzel, die in der robots.txt unter dem Namen des Crawlers steht. Die Serverantwort bedeutet, dass der Crawler einen anderen Statuscode erhält, während der gewöhnliche Browser und die Placebo-Sonde durchkommen. Google-Extended ist kein Crawler mit eigener Anfragekennung, sondern ein robots.txt-Token; für ihn wird nur die Erklärung gezählt. Nenner sind die 412 antwortenden Websites.
| Crawler | in robots.txt gesperrt | am Server abgewiesen | laut Erklärung erlaubt, vom Server abgewiesen |
|---|---|---|---|
| GPTBot | 16 (3,9 %) | 28 (6,8 %) | 15 (3,6 %) |
| OAI-SearchBot | 8 (1,9 %) | 10 (2,4 %) | 2 (0,5 %) |
| ClaudeBot | 18 (4,4 %) | 30 (7,3 %) | 18 (4,4 %) |
| PerplexityBot | 9 (2,2 %) | 10 (2,4 %) | 4 (1,0 %) |
| Google-Extended | 7 (1,7 %) | — | — |
Nicht messbare Websites
88 Websites waren nicht messbar und zählen nicht zum Nenner; Anteile beziehen sich nur auf antwortende Websites.
| Grund | Websites |
|---|---|
| antwortete auf die gekennzeichnete Messanfrage mit 403 | 24 |
| lieferte statt der Startseite eine Bot-Prüfseite | 4 |
| TLS-Zertifikat nicht überprüfbar | 23 |
| Domain im DNS nicht auflösbar | 15 |
| Zeitüberschreitung | 10 |
| anderer Verbindungsfehler | 7 |
| andere HTTP-Antwort | 5 |
Methode
Die Stichprobe sind die ersten 500 Domains mit der Endung .tr in Version 26Y29 der Tranco-Liste (2026-10-06); die Liste kombiniert die Rankings von Chrome UX Report, Cloudflare Radar, Cisco Umbrella, Majestic und Farsight. Gemessen wurde am 2026-10-07 von einem einzigen Standort aus.
Jede Website erhielt unter unserer eigenen Kennung höchstens drei Anfragen (Startseite, robots.txt, llms.txt), danach eine gewöhnliche Browser-Sonde, eine bot-förmige Placebo-Sonde und je Crawler eine Sonde, alle an dieselbe Adresse, bei der die Weiterleitungen ankommen. Erhält ein Crawler einen anderen Statuscode, während Browser und Placebo durchkommen, gilt die Sperre als spezifisch für diesen Crawler.
Eine llms.txt wurde nur gezählt, wenn ihre erste nicht leere Zeile eine Überschrift erster Ebene ist (die einzige Pflichtregel des llmstxt.org-Vorschlags); diese Prüfung erfolgte am selben Tag mit je einer zusätzlichen Anfrage an Websites mit Datei. Eine Startseite ohne Beschreibung und ohne JSON-LD wurde am selben Tag ein weiteres Mal abgerufen: Trug die Antwort das Merkmal einer Bot-Prüfung und war deren Titel so lang wie der Titel der ersten Antwort, wurde die Website aus dem Nenner genommen. Ein einzelner Durchlauf misst einen Moment: CDN-Entscheidungen können je nach Region und Zeit variieren.
Daten
Die Messung auf Website-Ebene erscheint als CSV, die Summen als JSON. Serversoftware und -version werden nicht pro Website veröffentlicht, sondern nur aggregiert gezählt.
Die Daten stehen unter CC BY 4.0: Sie dürfen sie frei nutzen, teilen und bearbeiten, solange die Quelle genannt wird.
Zitiervorschlag
murattunalı. (2026). Maschinenlesbarkeitsindex Türkei [Datensatz]. https://www.murattunali.com.tr/de/observatorium/maschinenlesbarkeitsindex/ · Messdatum 2026-10-07
- @misc{murattunali_endeks_2026_10_07,
- title = {Maschinenlesbarkeitsindex Türkei},
- author = {{murattunalı.}},
- year = {2026},
- url = {https://
www.murattunali.com.tr /de /observatorium /maschinenlesbarkeitsindex /}, - note = {2026-10-07 · CC BY 4.0}
- }