Cloudflare, het bedrijf dat zo’n 20% van alle websites wereldwijd bedient (inclusief al onze eigen sites), introduceerde “Markdown for Agents”. De feature converteert je HTML-pagina’s automatisch naar Markdown wanneer een AI-crawler daarom vraagt. Het resultaat: tot 80% minder tokens, wat neerkomt op sneller en goedkoper verwerken van content.
Op het eerste gezicht een logische stap. Maar binnen een dag verschenen er al kritische reacties vanuit de SEO-wereld. En terecht, want achter deze technische verbetering schuilt een fundamenteel spanningsveld.
Twee werelden, twee belangen
Wat ons opvalt: er worden twee compleet verschillende use cases door elkaar gehaald.
Aan de ene kant heb je developers, of eigenlijk iedereen die AI-agents bouwt of gebruikt om informatie van het web te halen. Denk aan een developer die met Claude Code documentatie van een API ophaalt, of een tool die automatisch productinformatie verzamelt. Voor hen is Markdown een zegen: minder tokens betekent meer ruimte in het context window. Wij gebruiken dit zelf dagelijks in ons development werk en merken direct het verschil.
Aan de andere kant heb je website-eigenaren, ondernemers en marketeers die investeren in SEO en steeds vaker in GEO (Generative Engine Optimization) om zichtbaar te zijn in AI-platformen zoals ChatGPT, Gemini en Perplexity. Voor hen gaat het er juist om dat AI-crawlers hun volledige pagina zien: de HTML, de structured data, de context. Alles wat bijdraagt aan hoe een AI-systeem hun content begrijpt en citeert.
Het probleem ontstaat wanneer oplossingen voor de eerste groep worden verkocht als SEO-strategie voor de tweede groep.
Google en Bing zijn duidelijk: doe dit niet
Google’s John Mueller liet er op Bluesky geen misverstand over bestaan. Op de vraag of websites aparte Markdown-pagina’s moeten maken voor LLM-crawlers, reageerde hij dat LLM’s al sinds het begin gewone webpagina’s verwerken en prima overweg kunnen met HTML. Kort daarna werd hij nog wat scherper:
Converting pages to markdown is such a stupid idea. Did you know LLMs can read images? WHY NOT TURN YOUR WHOLE SITE INTO AN IMAGE?
— John Mueller (@johnmu.com) 2026-02-03T15:40:56.697Z
Collega Gary Illyes sloot zich aan: Google ondersteunt llms.txt niet en is dat ook niet van plan.
Vanuit Microsoft klonk hetzelfde geluid. Fabrice Canel van Bing waarschuwde dat aparte versies voor bots neerkomt op dubbele crawl load. Bing zal sowieso beide versies ophalen om similarity te checken. Zijn advies: investeer in Schema markup en maak je pagina’s zo goed mogelijk.
Het cloaking-risico
SEO-consultant David McSweeney toonde aan dat Cloudflare’s Accept: text/markdown header wordt doorgestuurd naar de origin server. Je server kan dus exact detecteren wanneer een AI-agent langskomt, en een compleet andere HTML-response teruggeven.
In theorie kun je zo een versie aan mensen tonen en een totaal andere versie aan AI-systemen. Dat is cloaking, en dat is al jaren een overtreding van Google’s richtlijnen.
Technical SEO consultant Jono Alderson verwoordde het treffend: zodra er een machine-specifieke versie van je pagina bestaat, heb je twee kandidaat-versies van de werkelijkheid gecreëerd. Van buitenaf moet een AI-systeem nu kiezen welke versie de echte is.
Waarom llms.txt je als website-eigenaar niet gaat helpen
Dit brengt ons bij het bredere punt: llms.txt is geen SEO- of GEO-strategie voor website-eigenaren.
De hype is groot. Het idee klinkt aantrekkelijk: een bestand dat AI-systemen vertelt waar je belangrijkste content staat, in opgeschoond Markdown-formaat. Platforms als Wix bieden zelfs automatische generatie aan. Maar de feiten zijn ontnuchterend:
Geen groot AI-platform heeft officieel support aangekondigd. Mueller vergeleek llms.txt met de keywords meta tag: een standaard die ooit veelbelovend leek, maar door niemand wordt gebruikt omdat de content te makkelijk te manipuleren is.
Google crawlt llms.txt niet voor search. Het Search-team bevestigde dat het niet wordt gebruikt voor discovery of rankings.
Het creëert duplicate content. Een Markdown-versie per pagina betekent twee versies van dezelfde content. Zoekmachines moeten dan kiezen welke ze vertrouwen, en die onzekerheid werkt niet in jouw voordeel.
Mueller’s advies is helder: als AI-bedrijven wisten dat een specifiek format betere resultaten zou opleveren, zouden ze daar heel luidruchtig over zijn. Die bedrijven staan niet bekend om hun bescheidenheid.
Waar llms.txt wél zinvol is
Om eerlijk te zijn: voor technische documentatie en API-referenties is het wél waardevol. Bedrijven als Anthropic, Stripe en Cloudflare gebruiken llms.txt voor hun developer docs, zodat AI-assistenten sneller code-gerelateerde vragen kunnen beantwoorden. Dat is precies die developer use case waar we het eerder over hadden.
Bouw je een SaaS-product met een publieke API? Dan kan llms.txt een slimme investering zijn. Maar als je een advocatenkantoor, een webshop of een marketingbureau bent? Dan is je tijd beter besteed aan goede HTML, structured data en kwalitatieve content.
Wat wij adviseren
Als website-eigenaar: focus op wat werkt. Sterke, goed gestructureerde HTML-pagina’s, relevante Schema markup, snelle laadtijden en content die écht waarde biedt. Dat is wat zowel zoekmachines als AI-platformen gebruiken om je te begrijpen en te citeren. Een llms.txt-bestand gaat daar niets aan veranderen.
Voor development en AI-tooling: Markdown-optimalisaties zoals Cloudflare’s feature zijn enorm nuttig. Wij gebruiken het zelf met AI-agents en merken direct de efficiencywinst.
Het verschil begrijpen tussen deze twee werelden is cruciaal. Laat je niet meeslepen door de hype rondom llms.txt als GEO-strategie. De grote platformen hebben gesproken: maak je website gewoon goed. De AI doet de rest.