Cloudflare gjør nettsteder klare for AI-agenter med «Markdown for Agents»

Cloudflare, mest kjent for sikkerhet og CDN-tjenester, går nå tungt inn i AI-infrastruktur. Med den nye funksjonen «Markdown for Agents» konverterer selskapet automatisk nettsider fra HTML til Markdown når AI-agenter ber om det – og kan redusere token-bruken med opptil 80 prosent.

Tunge HTML-sider

Problemet ifølge Cloudflare, er at HTML inneholder langt mer enn selve teksten, vi snakker HTML-elementer, CSS-klasser, JavaScript, metadata og annen markup.

For en språkmodell er dette i praksis støy – men støy som likevel koster tokens å prosessere, skriver TheNewStack.

Cloudflare sitt eget blogginnlegg hvor de annonserer nyheten ville veid 16.180 tokens. Samme innhold i Markdown veier 3.150 tokens.

Det tilsvarer en besparelse på rundt 80 % i token-bruk, noe som direkte reduserer kostnader ved inferens (AI-kjøring).

Slik fungerer Markdown for Agents

Cloudflare prøver løse dette problemet umiddelbart etter forespørselen etter HTML, uten at du trenger gjøre noe på din server. Når en AI-agent sender forespørselen:

Accept: text/markdown

gjør Cloudflare følgende:

1. Henter original HTML fra serveren

2. Konverterer HTML til Markdown

3. Sender Markdown tilbake til agenten

Vanlige nettlesere får fortsatt vanlig HTML. Populære kodeagenter som Claude Code og OpenCode sender allerede slike forespørsler, skriver TheNewStack.

Ekstra signaler for AI-bruk

Cloudflare legger også til egne HTTP-headere:

• x-markdown-tokens → viser token-antall

• content-signal → f.eks. ai-train=yes, search=yes, ai-input=yes

Dette gjør det enklere for AI-agenter å vite om dokumentet får plass i kontekst-vinduet, avgjøre om det må deles opp og forstå om innholdet er godkjent for trening og indeksering

I fremtiden vil nettstedseiere kunne tilpasse disse policyene mer detaljert, ifølge Cloudflare.

Ikke for alle

Den nye funksjonaliteten er riktignok ikke tilgjengelig for alle. Det er kun Pro- og Business-kunder som får den opp i Cloudflare-dashboardet.