llms.txt: milleks see tegelikult on

Mida ettepanek ütleb

Faili llms.txt kirjeldatakse saidil llmstxt.org, ettepaneku enda saidil; ettepaneku avaldas Jeremy Howard 3. septembril 2024 ja seda muudeti 10. augustil 2026. Tekst nimetab end ettepanekuks standardiseerida faili /llms.txt kasutamine. Sõna on oluline: see pole mõne organisatsiooni norm, vaid kokkulepe, mille igaüks võib vabalt omaks võtta.

Vorming on teadlikult lihtne. Markdown-fail saidi juurkaustas, mis sisaldab:

• esimese taseme pealkirja, ainsat kohustuslikku elementi, saidi või projekti nimega;
• lühikest kokkuvõtet tsitaadina;
• vajaduse korral mõnda selgitavat lõiku;
• pealkirjastatud jaotisi, mis loetlevad linke, igaühel valikuline märkus. Jaotis nimega „Optional“ koondab kokkuleppe kohaselt selle, mille agent võib ruumipuuduse korral vahele jätta.

Ettepanek soovitab ka pakkuda kasulikest lehtedest puhast Markdown-versiooni, samal aadressil lisatud .md-ga. Põhiidee on õige: kaasaegne HTML-leht on täis menüüsid, skripte ja bännereid ning mudel, mis peab piiratud kontekstiaknas olulise välja võtma, võidab, kui saab juba puhastatud teksti.

Sait eristab faili hoolikalt selle naabritest:

Mida saab tegeliku kasutuse kohta kontrollida

Just siin lähevad vaimustunud artiklid hoogu. Siin on see, mida suutsime ise avatud allikate põhjal kontrollida.

Avaldamise poolel on kasutuselevõtt tegelik. Ettepaneku 2. versioon väidab, et tuhanded saidid avaldavad llms.txt-faili ja et dokumentatsiooniplatvormid loovad selle automaatselt. Me ei loendanud neid tuhandeid saite, kuid üht näidet on lihtne kontrollida: OpenAI dokumentatsioon oma robotite kohta viitab ise oma /llms.txt-failile kui dokumentatsiooni indeksile ja pakub oma lehtedest Markdown-versioone, kui aadressile lisada .md.

Otsingumootorite lugemise poolel pole midagi kontrollitavat. See, mida pakkuja avaldab oma dokumentatsiooni jaoks, ei ütle, mida tema robotid mujal loevad. Ametlikud lehed, mille avasime, viitavad kõik samas suunas:

• Sama OpenAI dokumentatsioon kirjeldab oma roboteid (OAI-SearchBot ChatGPT otsingu jaoks, GPTBot mudelite jaoks), rääkides robots.txt-st ja mitte kunagi llms.txt-st kui kriteeriumist.
• Anthropicu abileht oma robotite kohta ei maini llms.txt-d.

Google on kõige selgesõnalisem. AI Overviews’i ja tehisintellekti režiimi kohta kirjutab tema dokumentatsioon tehisintellekti funktsioonidest:

Ettepanek ise jääb ettevaatlikuks: see kirjutab, et fail pidi teenima eelkõige hetke, mil mudel vastab (järeldamine), mitte treenimist, ega väida kuskil, et see mõjutab järjestust või tsiteeritavate allikate valikut.

Meie järeldus selle põhjal, mida saab kontrollida 2. oktoobri 2026 seisuga: ükski esmane allikas ei võimalda väita, et mõni suur otsingumootor kasutab llms.txt-d otsustamiseks, keda tsiteerida. Need, kes seda lubavad, ekstrapoleerivad. Kui mõni pakkuja selle ühel päeval mustvalgel välja kuulutab, uuendatakse seda artiklit.

Kus see tegelikult kasulik on

Failil on siiski konkreetne kasutus, tagasihoidlikum kui see, mida talle omistatakse: agendid, kes loevad saiti nõudmisel. Koodiassistent, kes peab teeki õppima, agent, kellele antakse saidi aadress palvega vastata selle sisu põhjal, sisemine tööriist, mis pärib dokumentatsiooni. Neil juhtudel on keegi juba otsustanud Teie saiti lugeda; llms.txt säästab teda arvamast, kust alustada.

Mida me tegime

Challenge Us: sisukord ja korpus

Challenge Us on meie arendatud rakendus väljakutseteks lähedaste vahel. Selle sait avaldab kaks teineteist täiendavat faili, sisukorra (/llms.txt) ja korpuse (/aide/index.json), mõlemad kirjutatakse saidi ehitamisel samadest loenditest kui lehed:

Kuna need toodetakse samast loendist kui avaldatud lehed, ei saa need kaks faili saidiga sünkroonist välja minna: see on ainus tingimus, mille korral nõustume veel ühe failiga. Käsitsi hoitud llms.txt valetab lõpuks alati selle kohta, mis olemas on.

Otsustasime ka, mida me ei tee: ei vektorandmebaasi ega tükeldamist semantilise otsingumootori jaoks. Mõnekümne lehe puhul mahub kogu korpus mudeli kontekstiaknasse. Kes ehitab infrastruktuuri enne sisu olemasolu, jääb infrastruktuuriga, aga ilma sisuta.

Palmora Property: auditis tuvastatud puudus, mis hiljem kõrvaldati

Palmora Property puhul, mis on Phuketi kinnisvara vahendusplatvorm, mida me toetame, ja mille sait on kuues keeles, märkis 22. juuli 2026 SEO- ja GEO-audit llms.txt puudumist (päring andis vea 404). Olime selle liigitanud madala prioriteediga ülesandeks, hinnanguliselt kaks kuni kolm tundi koos blogi RSS-vooga, kaugele päeva tegeliku probleemi taha: robots.txt blokeeris meie teadmata tehisintellekti roboteid, millest räägime artiklis kuidas saada ChatGPT poolt tsiteeritud. Fail on nüüd olemas ja luuakse iga päringu korral: platvormi tutvustus, peamised piirkonnad, juhendid keele ja rahvuse kaupa, kinnisvaraportaalid.

Aga see sait?

Jah, alates 2026. aasta oktoobrist, kui struktuur oli stabiliseerunud: see on järjekord, mida soovitame, kõigepealt struktuur, siis sisukord. /llms.txt loetleb meie pakkumised koos hinnaga, juhtumiuuringud, tööriistad ja blogi rubriigid; /llms-full.txt lisab iga artikli koos lühivastusega. Mõlemad luuakse saidi iga ehitamisega samadest loenditest kui lehed: need ei saa öelda midagi muud kui sait.

Kas peaks selle avaldama?

Jah, kui kolm järgmist tingimust on täidetud, ja ootamata sellelt midagi tsitaatide osas:

1. Ülejäänu on korras. Tehisintellekti robotitel on lubatud saiti lugeda, lehed vastavad küsimusele kohe alguses, faktidel on allikad, struktureeritud andmed vastavad kuvatule. llms.txt ei korva ühtegi neist puudustest. Neid aluseid kirjeldame artiklis mida SEO-agentuur peab tehisintellekti ajastul pakkuma.
2. See luuakse, mitte ei kirjutata käsitsi. Ehitamise ajal Teie sisukogudest või kataloogist loodud fail püsib õigena ilma vaevata. Käsitsi kirjutatuna vananeb see juba teise lisatud lehega.
3. See viitab lehtedele, mis vastavad. Tühjade lehtede sisukord on kasutu. Mitmekeelsel saidil viitab see lehtedele, mis on olemas väljakuulutatud keeles: hreflangi vead nõuavad sama hoolt.

Nende aluste kontrollimine on osa meie SEO-auditist ja nende pikaajaline rakendamine osa meie SEO ja GEO mootorist.

Korduma kippuvad küsimused

Allikad

1. Llmstxt.org (uus vahekaart)llmstxt.org
2. OpenAI dokumentatsioon oma robotite kohta (uus vahekaart)developers.openai.com
3. Anthropicu abileht (uus vahekaart)support.claude.com
4. Tema dokumentatsioon tehisintellekti funktsioonidest (uus vahekaart)developers.google.com