Cloudflare zavádí Markdown pro agenty k optimalizaci doručování AI obsahu
Brief news summary
Prostředí objevování online obsahu se rychle vyvíjí, jak AI crawlery vylepšují tradiční vyhledávače a SEO využíváním strukturovaných dat. Nicméně velká část obsahu na webu zůstává nestrukturovaná a primárně navržena pro lidi, což představuje výzvy pro AI při zpracování. Aby firmy zůstaly konkurenceschopné, musí optimalizovat svůj obsah jak pro lidské čtenáře, tak pro AI systémy. Předávání surového HTML modelům AI je neefektivní a spotřebovává mnoho tokenů. Markdown nabízí stručnou, AI-přátelskou alternativu. Cloudflareův "Markdown for Agents" převádí HTML do lehkého markdownu v reálném čase, snižuje spotřebu tokenů až o 80 % a zároveň zachovává význam a zjednodušuje zpracování AI – vše při zachování záměru tvůrců. Odpovědi jasně specifikují povolené způsoby použití AI, například pro trénink a vyhledávání. Tato inovace pomáhá populárním AI agentům pro kódování a zlepšuje konzumaci obsahu AI. Další nástroje Cloudflare, jako Workers AI a API pro rendering prohlížeče, podporují konverzi do markdownu, zatímco Cloudflare Radar sleduje využívání markdownu boty AI pro sledování trendů. Bezplatně dostupné pro zákazníky Pro, Business a Enterprise lze toto nastavení zapnout přes Cloudflare dashboard, čímž se optimalizují webové stránky pro objevování řízené AI a obsah se připraví na budoucnost.Způsob, jakým se online objevují obsah a podniky, se rychle vyvíjí. Dříve většina návštěvnosti přicházela ze tradičních vyhledávačů, přičemž SEO určovalo viditelnost. Nyní je stále větší část návštěvnosti poháněna AI crawlery a agenty, kteří vyžadují strukturovaná data z přirozeně nestrukturovaného webu zaměřeného na člověka. Aby zůstali vepředu, musí podniky přehodnotit nejenemožnosti lidských návštěvníků nebo tradiční SEO, ale také považovat AI agenty za rovnocenné uživatele. Posílat AI surový HTML je neefektivní – HTML je verbose a obsahuje hodně tokenů ve srovnání s markdownem. Například jednoduchá sekce „O nás“ stojí přibližně 3 tokeny v markdownu, zatímco v HTML 12–15 tokenů, bez zahrnutí ne-semantiálních prvků jako div obaly a skripty, které zvyšují počet tokenů bez přidání významu. Tato blogová příspěvek používá při měření v tokenech 16 180 tokenů v HTML, ale pouze 3 150 tokenů v markdownu – což představuje snížení o 80 %. Markdown se stal preferovaným formátem pro AI systémy díky své explicitní struktuře, která podporuje lepší zpracování AI a snižuje plýtvání tokeny. Nicméně, protože je web primárně složen z HTML a velikosti stránek se zvětšují, musí AI agenty filtrovat zbytečné části, aby získaly relevantní obsah. Převod HTML na markdown v AI pracovních postupech je běžný, ale není dokonalý: přidává výpočetní nároky, náklady a složitost a nemusí odpovídat záměru tvůrce. Cloudflare nyní nabízí inovativní řešení, kdy provádí převod HTML na markdown v reálném čase přímo v zdroji pro weby na své síti s aktivovaným Markdown for Agents.
AI systémy mohou požadovat verze stránek ve formátu markdown prostřednictvím hlavičky Accept, specifikující „text/markdown“. Cloudflare načte originální HTML a automaticky jej v reálném čase převede na markdown, čímž poskytne optimalizovanou, AI efektivní odpověď. Například požadavek curl s hlavičkou „Accept: text/markdown“ načte markdown obsah z dokumentace vývojáře Cloudflare. Vývojáři AI využívající Cloudflare Workers mohou podobně specifikovat tuto hlavičku ve fetch voláních v TypeScriptu. Oblíbení agenti jako Claude Code a OpenCode již tento přístup používají a dostávají markdownové odpovědi, které usnadňují parsování a zefektivňují tokenové využití. Odpovědi také obsahují hlavičku x-markdown-tokens, která odhaduje počet tokenů a pomáhá AI systémům optimalizovat kontextová okna a strategie rozdělování obsahu. Markdown pro Agents je integrován s rámcem Cloudflare Content Signals, který byl představen během Birthday Week. Tento rámec umožňuje tvůrcům obsahu řídit povolení používání AI. Odpovědi obsahují hlavičky jako Content-Signal: ai-train=yes, search=yes, ai-input=yes, což signalizuje souhlas s tréninkem AI, indexací ve vyhledávačích a užíváním agentů s možností budoucího nastavení vlastních politik. Cloudflare tuto funkci zavedl ve své Dokumentaci a Blogu, podporujíc AI crawlery, aby konzumovaly markdown místo HTML, čímž zlepšuje efektivitu a sémantiku. Pro AI systémy, které potřebují převádět dokumenty mimo Cloudflare nebo když není dostupný Markdown for Agents, nabízí Cloudflare alternativní řešení: - Workers AI’s AI. toMarkdown() podporuje více typů dokumentů a shrnutí. - Konverze přes REST API /markdown umožňuje převádět dynamické stránky po jejich načtení. Cloudflare Radar nyní sleduje požadavky obsahového typu od AI botů a crawlerů celosvětově i dle agentů, včetně statistik načítání markdownu, například od OAI-Searchbot od OpenAI napájícího ChatGPT. Tyto údaje pomáhají sledovat trendy v konzumaci AI obsahu a jsou volně dostupné přes veřejné API a Data Explorer. Chcete-li aktivovat Markdown pro Agents, mohou uživatelé tuto funkci zapnout v panelu Cloudflare pro svou zónu. Funkce je momentálně v beta verzi zdarma pro plány Pro, Business, Enterprise a zákazníky SaaS s SSL. Stručně řečeno, s rostoucí integrací AI do objevování obsahu, přijetí Markdown pro Agents umožňuje webovým stránkám efektivně poskytovat strukturovaný, stručný obsah přímo AI, snižovat zatížení zpracování, ctít záměr tvůrců a připravit se na budoucnost webové interakce.
Watch video about
Cloudflare zavádí Markdown pro agenty k optimalizaci doručování AI obsahu
Try our premium solution and start getting clients — at no cost to you