Kuidas saada ChatGPT ja tehisintellekti otsingute viidatuks

Lühidalt

• Kõigepealt kontrollige, kas assistentide robotid saavad saiti lugeda. OpenAI puhul otsustab ChatGPT otsingus ilmumise OAI-SearchBot ja CDN võib robotid blokeerida, ilma et Teie kood seda näitaks.
• Pange vastus lehe algusesse: üks leht küsimuse kohta, lõigus, mis on arusaadav ka kontekstist välja võetuna.
• Viidake iga fakti allikale ja kuupäevale. GEO viiteuuringus on allikatele viitamine ning tsitaatide või statistika lisamine kõige paremini toimivad ümberkirjutused.
• Märgistage struktureeritud andmetega ainult seda, mis on kuvatud. Google ei nõua oma tehisintellekti funktsioonide jaoks erilist märgistust.
• Keegi ei garanteeri viidet: seda mõõdetakse päring päringu haaval, kindlatel kuupäevadel, mitmes assistendis.

Esimene põhjus, miks Teile ei viidata: robotid ei loe saiti

„GEO-st“ (Generative Engine Optimization) räägitakse palju kui uuest distsipliinist. Meie auditites pole esimene probleem sugugi uus: sait pole assistentide robotitele loetav. Enne kui ühtegi lehte ümber kirjutate, tuleb see punkt üle kontrollida, sest ükski toimetustöö ei korva suletud ust.

Iga osaleja avaldab oma robotite loendi ja need ei tee kõik sama asja. Nii ütlevad OpenAI ametlik dokumentatsioon ja Anthropicu vastav abileht, robot roboti haaval:

OpenAI leht täpsustab, et sait, mis blokeerib OAI-SearchBoti, ei ilmu ChatGPT otsinguvastustes ja et robots.txt muudatuse arvessevõtmiseks kulub umbes 24 tundi. Anthropicu puhul austavad kõik kolm robotit robots.txt faili.

Praktiline tagajärg: võite keelduda treenimisest ja lubada otsingut või vastupidi. See on õigustatud toimetuslik valik. Õigustatud pole seda taluda, teadmata.

Mida me tegime: Palmora Property juhtum

Palmora Property on kinnisvara vahendusplatvorm Phuketis, mida me toetame, kuuekeelse saidiga. Kokkulepitud strateegia oli selge: jääda tehisintellekti assistentidele loetavaks. Hoidla robots.txt fail oli korras, see lubas kõiki peale privaatsete alade.

:::terrain[Serveeritud fail polnud see, mis oli hoidlas] 22. juuli 2026 SEO ja GEO audit leidis tootmiskeskkonnast siiski midagi muud. Tegelikult serveeritud robots.txt algas Cloudflare’i lisatud plokiga, „hallatud robots.txt-ga“, mida koodis polnud. See sisaldas Disallow: / reeglit GPTBoti, ClaudeBoti, CCBoti, Google-Extendedi, Amazonboti, Applebot-Extendedi, Bytespideri, meta-externalagenti ja Cloudflare’i renderdusroboti jaoks. Keegi polnud seda palunud. Lülitasime selle samal päeval välja. :::

Kolm õppetundi sellest episoodist:

• Kontrollitakse seda, mida serveeritakse, mitte seda, mis on kirjas. Üks curl tootmisaadressile piisas ploki nägemiseks. Hoidla faili lugemine poleks seda kunagi näidanud.
• Võrgukiht võib Teie faile ümber kirjutada. CDN, veebirakenduste tulemüür või vaikimisi sisse lülitatud valik „kaitse tehisintellekti robotite eest“ toimivad enne Teie saiti.
• Blokeerimisel olid kõrvalmõjud. Hallatud ploki mittestandardsed read panid Lighthouse’i pidama robots.txt faili kehtetuks, mis piiras SEO skoori 92-ga.

Aus täpsustus: blokeeritud loend oli suunatud peamiselt treenimisrobotitele. OAI-SearchBoti selles polnud. Sait polnud seega tingimata kõigist ChatGPT vastustest puudu, kuid mitme osaleja jaoks oli, vastu meie tahtmist. Sellest ajast peale on esimene samm, kui teema tõuseb, see Cloudflare’i seadistus üle vaadata.

Vastake kohe ja ühele küsimusele

Kui uks on avatud, loeb lehtede vorm. Vastust koostav assistent eraldab lõike. Lõigul, mis on arusaadav üksinda, oma lehest väljaspool, on suurem võimalus üle võetud saada kui lõigul, mis eeldab kolme eelneva lugemist.

Me rakendame kahte lihtsat reeglit:

• Vastus kõigepealt. Selles blogis algab iga artikkel kahe kuni nelja lause pikkuse otsese vastusega, mis on kuvatud pealkirja all. See on fragment, mida tahame eraldatuna näha. Ülejäänud artikkel põhjendab seda.
• Üks leht, üks küsimus. See on meie arendatud lähedastevaheliste väljakutsete rakenduse Challenge Us teadmusbaasi põhimõte: 45 lehte, igaüks pealkirjastatud küsimusega kasutajate sõnades, kahe- või kolmelauselise vastusega, mis peab olema iseseisvalt arusaadav. Sait keeldub ehitamast, kui kaks lehte annavad sama vastuse või kui pealkiri pole küsimus.

See distsipliin teenib ka inimesi: kiirustav lugeja loeb kolm rida ja lahkub oma vastusega.

Allikate ja kuupäevadega faktid

Ainus tõsine teaduslik uuring, mida me sel teemal teame, on „GEO: Generative Engine Optimization“ (Aggarwal jt, esitletud KDD 2024 konverentsil). Autorid ehitasid 10 000 päringuga katsestendi ja testisid üheksat viisi sisu ümberkirjutamiseks. Kolm kõige paremini toimivat: tsitaatide lisamine, statistika lisamine, allikatele viitamine. Märksõnadega ülekuhjamine seevastu ei too peaaegu midagi ja toimib Perplexity testis isegi halvemini kui algtekst. Nad raporteerivad järgmisi kasvusid:

Neid numbreid tuleb lugeda sellisena, nagu need on. Mõõdetud nähtavus on vastuse teksti osa, mis pärineb allikast, kaalutud selle positsiooniga, mitte liiklus ega käive. Peamised katsed põhinevad simuleeritud mootoril (GPT-3.5-turbo, mida toidetakse Google’i viie esimese tulemusega), ja autorid ise hoiatavad, et meetodid peavad mootorite arenedes kohanema. See on kindel vihje suuna kohta, mitte garanteeritud retsept.

Suund ühtib igal juhul sellega, mida me teeme muudel põhjustel: saitidel, mille sisu me kirjutame, ei avaldata ühtegi numbrit ilma lingita selle tegelikult avatud esmasele allikale. Assistendil, kes peab valima kahe lehe vahel, on head põhjused eelistada seda, mis ütleb, kust tema väited pärinevad. Ja iga lehe dateerimine (avaldamise kuupäev, uuendamise kuupäev ja Challenge Usi puhul rakenduse versioon, milles vastust kontrolliti) ütleb lugejale, inimesele või masinale, millest juttu on.

Struktureeritud andmed ainult kuvatava jaoks

Struktureeritud andmed (JSON-LD) aitavad mootoritel mõista, mis leht on: artikkel, organisatsioon, küsimus ja selle vastus. Need pole tehisintellekti mootorite jaoks linnuke kastis. Google ütleb seda selgelt oma tehisintellekti funktsioonide dokumentatsioonis: AI Overviewsis ilmumiseks pole lisanõudeid ega erilist faili või märgistust, mida luua.

Oluline reegel on mujal. Google’i üldjuhised keelavad lugejale nähtamatu sisu märgistamise. Oleme teinud sellest tehnilise piirangu: Challenge Usi saidil loevad kuvatud KKK ja märgistatud KKK sama loendit, nii et need ei saa lahkneda. Märgistatud KKK, mida ekraanil pole, on endale karistuse tegemine.

Kuidas mõõta ennast petmata

See on osa, millest „GEO“ pakkumised kõige rohkem üle libisevad. Assistentide jaoks pole Search Console’i. Siin on see, mida me teeme, ja mitte rohkem:

1. Sihtpäringute loend, mis sisestatakse käsitsi ChatGPT-sse, Claude’i ja Perplexitysse, kindlatel kuupäevadel, märkides, kas saidile viidatakse ja millisele lehele. See on käsitöö, vastused erinevad seansiti ja seetõttu korratakse mõõtmist, selle asemel et ühe katse põhjal järeldusi teha.
2. Serveri või CDN-i logid, filtreeritud robotite nimede järgi (OAI-SearchBot, GPTBot, ChatGPT-User, ClaudeBot, Claude-User, Claude-SearchBot). Need ütlevad, kas robotid käivad ja milliseid lehti nad loevad. Need ei ütle, kas Teile viidatakse.
3. Assistentidest tulevad külastused Teie statistikas, kui viitaja edastatakse. See on alampiir: paljud viited ei too ühtegi klõpsu.

Mida me ei tee: me ei luba viidete arvu. Keegi ei kontrolli, mida mudel otsustab tsiteerida. Agentuur, mis seda garanteerib, müüb muljet, mitte tulemust.

Kust alustada

Töid tehakse selles järjekorras:

Fail llms.txt tuleb pärast, ja oleme kirjeldanud, mida sellelt tegelikult oodata võib. Mitmekeelse saidi puhul lisage hreflangi kontroll: assistent ei viita lehele, mida ta õiges keeles ei leia, ja kõige sagedasemad vead on kergesti märgatavad.

Need kontrollid on osa meie SEO auditist ja pikaajaline töö meie SEO ja GEO mootorist. Üldine meetod on kirjeldatud artiklis mida SEO-agentuur peab tehisintellekti ajastul pakkuma.

Korduma kippuvad küsimused

Allikad

1. OpenAI ametlik dokumentatsioon (uus vahekaart)developers.openai.com
2. Anthropicu vastav abileht (uus vahekaart)support.claude.com
3. „GEO: Generative Engine Optimization“ (uus vahekaart)arxiv.org
4. Oma tehisintellekti funktsioonide dokumentatsioonis (uus vahekaart)developers.google.com
5. Google’i üldjuhised (uus vahekaart)developers.google.com