Přestaňte dělat AI optimalizace, které ve skutečnosti nefungují

Posledních pár měsíců bylo matoucích. Co bychom měli dělat se svými weby, abychom je připravili na AI? Čemu se vyhnout? Najít správné odpovědi je těžší než kdy dřív, protože různé autority tvrdí protichůdné věci.

Abychom zjistili, co skutečně zlepšuje viditelnost v AI vyhledávání a nástrojích, musíme jít hlouběji. Musíme porozumět tomu, jak AI modely fungují, co prozrazují serverové logy o chování crawlerů, a sledovat viditelnost v AI. Poslednímu tématu jsem se věnoval v předchozím díle. Je to složité, protože sledování není ani snadné, ani levné, a nehodí se pro každý web.

Pojďme si tedy promluvit o některých populárních „optimalizacích", které dělají víc škody než užitku.

Poskytování Markdownu místo standardních stránek

Pravděpodobně nejkontroverznější doporučení, které jsem v poslední době slyšel, je poskytovat AI crawlerům Markdown místo tradičních webových stránek. Na první pohled to zní zajímavě. Ale problém je hlubší, než si většina lidí uvědomuje.

Crawlery neextrahují pouze text. Vyhodnocují weby jako celek. Tak rozlišují autoritu a zachycují signály, které samotný Markdown jednoduše nemůže poskytnout.

Jedním z největších rizik je cloaking. Když poskytujete odlišný obsah na základě user agenta, Google vám může web z tradičního vyhledávání úplně odstranit. To je riziko, které by nikdo neměl brát na lehkou váhu.

Na druhou stranu Markdown dokáže ušetřit značné množství tokenů. Redukce je často až 80 %. Dokonce i Cloudflare nedávno oznámil Markdown for Agents. Ale širší podpora od ostatních společností zatím chybí.

Prozatím rizika převažují nad přínosy.

llms.txt a llms-full.txt

Tyto dva soubory nejsou oficiálním standardem. Na základě mého sledování serverových logů z mnoha webů různých jazyků, velikostí a odvětví vám mohu říct, že žádný z současných velkých hráčů tyto soubory nepoužívá.

S llms.txt je to jednoduché. Můžete ho vytvořit za pár minut a nechat na serveru, dokud ho AI crawlery nezačnou používat. Je to pěkný doplněk ve stylu „nastav a zapomeň" (ideálně byste ho měli aktualizovat spolu s obsahem).

S llms-full.txt je to mnohem horší.

Pro malé weby s tuctem stránek je vytvoření a aktualizace tohoto souboru snadný úkol. AI crawlery by ho potenciálně mohly využít, protože by soubor zůstal pod 1M tokenů. Ale u větších webů se to stává nemožným. Generování takového množství obsahu najednou by bylo extrémně náročné na zpracování servery.

Je tu i druhý problém. Limity vstupních tokenů současných AI modelů. U většiny větších webů by tento soubor výrazně přesáhl 1M tokenů. V mnoha případech by mohl dosáhnout přes 100M nebo dokonce 1B tokenů. To ho činí naprosto nepoužitelným. Nedokázali byste ho ani otevřít v současných nástrojích a prohlížečích.

Client-side Schema je pro AI neviditelné

Všiml jsem si několika služeb, které pomocí AI generují implementaci Schema Markup pro váš web nebo e-shop. Stačí přidat jeden kus JavaScriptu z domény dané služby.

Tento přístup sice může pomoci v tradičním vyhledávání, protože Google umí renderovat JavaScript, ale ani Google nedoporučuje implementovat Schema tímto způsobem.

Pro AI je to ještě horší. Většina AI crawlerů stále vůbec nerenderuje JavaScript. To znamená, že tyto JSON-LD schémata neuvidí. Platíte za drahou službu, která je neviditelná právě pro systémy, pro které se snažíte optimalizovat.

Co byste měli skutečně dělat?

Takže co funguje a co ne? Nejjednodušší rada, kterou mohu dát všem vlastníkům a správcům webů, je tato: dodržujte SEO standardy. Technické SEO je pro AI crawlery ještě důležitější než pro tradiční vyhledávání.

Na LinkedInu, X a dalších sociálních platformách můžete vidět miliony samozvaných „AI expertů", kteří nemají ponětí, jak věci ve skutečnosti fungují. Takže jak jsem říkal minule, nepodléhejte FOMO. Soustřeďte se na základy. Na těch stále záleží nejvíc.