mainostoimisto.ai
Oulu · 06:00:00

5 minMittaaminenKirjoitti kone · faktat tarkisti kone · vastuu: Ilkka Immonen

Näin testaat, näkyykö yrityksesi ChatGPT:ssä — 20 minuutin protokolla

Vastaus lyhyestiTestaat sen itse, ilman työkalua: kirjoita kymmenen kysymystä, joilla asiakas oikeasti etsisi palveluasi, esitä ne ChatGPT:lle väliaikaisessa keskustelussa web-haku päällä, ja kirjaa jokaisesta vastauksesta, mainittiinko yrityksesi ja mitkä sivut lainattiin. Toista sama viikoittain. Yksi ajo ei kerro mitään, koska mallin vastaukset eivät ole deterministisiä ja ChatGPT muokkaa hakuja muistin ja sijainnin perusteella. Trendi kertoo.

Kysymys “näkyykö yritykseni ChatGPT:ssä” on kahdella tavalla vaikeampi kuin “näkyykö yritykseni Googlessa”. Ensiksi ei ole Search Consolea: OpenAI ei anna sivuston omistajalle raporttia siitä, montako kertaa ChatGPT on lainannut sivua. Toiseksi ChatGPT ei vastaa kahdesti samalla tavalla. Siksi ainoa rehellinen tapa on tehdä otos itse, kirjata se ja toistaa.

Tämä on protokolla, jota tämä sivusto käyttää omaan seurantaansa. Se on manuaalinen tarkoituksella. Se ei vaadi työkalua, ja se paljastaa samalla, miksi työkalujen luvut kannattaa lukea varauksella.

Tulokset vaihtelevat, koska malli ei ole deterministinen

OpenAI sanoo sen suoraan omassa dokumentaatiossaan. OpenAI Cookbookin mukaan Chat Completions -rajapinta on “non-deterministic by default (which means model outputs may differ from request to request)”. Kehittäjälle on tarjolla seed-parametri, mutta senkin kohdalla OpenAI kirjoittaa: “Determinism is not guaranteed.” Tavallisessa ChatGPT-käyttöliittymässä seed-parametria ei ole lainkaan.

Käytännössä tämä tarkoittaa, että sama kysymys voi tuottaa tänään vastauksen, jossa yrityksesi on kolmen suositellun joukossa, ja huomenna vastauksen, jossa sitä ei mainita. Kumpikaan ei ole “oikea” tulos. Oikea tulos on se, kuinka usein olet mukana kymmenessä toistossa.

Toinen syy: ChatGPT muokkaa hakua muistin ja sijainnin perusteella

Kun ChatGPT hakee verkosta, se ei lähetä kysymystäsi sellaisenaan. OpenAI:n ohjesivu kertoo kaksi asiaa, jotka vaikuttavat testiin. Ensimmäinen: “ChatGPT may use an approximate location based on your IP address to provide relevant local results.” Toinen: “If memory is enabled, ChatGPT may use relevant saved memories when rewriting a search query.” OpenAI:n oma esimerkki on, että jos olet kertonut olevasi vegaani San Franciscossa, hakukysely voi muuttua muotoon “good vegan restaurants San Francisco”.

Yrittäjälle tämä on ansa. Jos olet keskustellut ChatGPT:n kanssa omasta yrityksestäsi, sen muisti tietää yrityksesi. Silloin testi kysyy käytännössä “suosittele minulle oma yritykseni”, ja tulos on parempi kuin asiakkaan näkemä.

Ratkaisu on väliaikainen keskustelu. OpenAI:n Memory FAQ sanoo: “Temporary chats do not create or update memories, even with personalization on.” Saman sivun mukaan väliaikaisessa keskustelussa voi myös valita, käytetäänkö olemassa olevia muistoja ja mukautettuja ohjeita. Testissä ne kytketään pois.

Sijaintia et voi kokonaan poistaa, mutta sen voi tehdä näkyväksi: kirjoita kysymykseen paikkakunta itse (“Oulussa”), jolloin IP-pohjainen arvaus ei ratkaise.

Näin testi tehdään

Tämä on aito prosessi, jossa järjestyksellä on väliä.

  1. Kirjoita kymmenen kysymystä sellaisina kuin asiakas ne kysyisi. Ei avainsanoja vaan lauseita: “Mikä kampaamo Oulussa tekee kotikäyntejä?”, “Kuka tekee WordPress-sivut pienelle yritykselle Pohjois-Suomessa?” Sekoita neljä geneeristä (“paras X paikkakunnalla”), neljä ongelmalähtöistä (“miten korjaan Y”) ja kaksi, joissa mainitset yrityksesi nimen. Nimikysymykset kertovat, tunteeko malli sinut lainkaan.

  2. Avaa ChatGPT, aloita väliaikainen keskustelu ja kytke muistin ja mukautettujen ohjeiden käyttö pois. Varmista, että web-haku on käytössä: OpenAI:n ohjeen mukaan ChatGPT hakee verkosta automaattisesti, “when your question would benefit from current information”, mutta haun voi myös valita itse työkaluvalikosta. Valitse se itse, niin tiedät, että vastaus perustuu hakuun eikä mallin koulutusdataan.

  3. Esitä yksi kysymys per keskustelu. Älä ketjuta kysymyksiä, koska aiempi vastaus vaikuttaa seuraavaan. Kymmenen kysymystä on kymmenen erillistä väliaikaista keskustelua.

  4. Kirjaa jokaisesta vastauksesta taulukkoon neljä asiaa: päivämäärä, mainittiinko yrityksesi nimeltä (kyllä/ei), lainattiinko jotakin sivuasi lähteenä (URL tai ei), ja mitkä kilpailijat mainittiin. Lähteet näet OpenAI:n ohjeen mukaan vastauksen Sources-näkymästä. Kopioi lisäksi vastauksen ensimmäinen kappale talteen. Se on tärkein, koska se on se, minkä kysyjä lukee.

  5. Toista koko sarja kerran viikossa samaan aikaan, samoilla kysymyksillä. Muuta kysymyksiä vasta, kun sinulla on kahdeksan viikon jono. Silloin näet, onko muutos trendi vai satunnaisvaihtelua.

Kymmenen kysymystä ja kirjaus vievät kokeneelta tekijältä noin 20 minuuttia. Se on ainoa luku tässä tekstissä, joka on oma arvio eikä lähteestä.

Miten tulos luetaan

Yhden viikon rivi ei ole tulos. Kahdeksan viikon jono on. Kysy siltä kolme asiaa.

Kuinka usein yritys mainitaan geneerisissä kysymyksissä? Jos nolla kertaa kahdeksassa viikossa, sinua ei ole olemassa tässä kanavassa, ja syy on todennäköisesti sama kuin Googlessa: ei sivua, joka vastaisi juuri tähän kysymykseen. Ohjeet siihen ovat pilarissa GEO ja tekoälyhaun optimointi.

Mitkä sivut lainataan, kun lainataan? Jos ChatGPT lainaa aina etusivua eikä koskaan palvelusivua, palvelusivu ei vastaa kysymykseen riittävän suoraan. Tässä sivustossa jokaisen artikkelin tiivistelmä on kirjoitettu juuri sitä varten, että se toimii lainattuna yksinään.

Ketkä kilpailijat toistuvat? Ne, jotka ovat mukana joka viikko, ovat ne sivustot, joista kannattaa katsoa, millaista sivua malli lainaa. Miten ChatGPT valitsee lähteensä, on oma artikkelinsa: miten ChatGPT valitsee lähteensä.

Tarkista ennen testiä, ettet ole estänyt itseäsi

Ennen kuin tulkitset nollatulosta, avaa sivustosi robots.txt. OpenAI:n bottidokumentaation mukaan ChatGPT:n haku käyttää OAI-SearchBot-nimistä crawleria, ja “Sites that are opted out of OAI-SearchBot will not be shown in ChatGPT search answers, though can still appear as navigational links”. Moni sivusto esti vuonna 2023 kaiken, mikä alkoi kirjaimilla “GPT”, ja osa kopioi estolistoja, joissa on myös OAI-SearchBot. Silloin testin tulos on nolla robots.txt:n takia, ei sisällön takia. Bottien erot ja päätös siitä, mitä sallitaan, on käyty läpi artikkelissa GPTBot, ClaudeBot ja PerplexityBot lokeissa.

Kolme virhettä, jotka tekevät otoksesta arvottoman

Ensimmäinen virhe on kysyä omalla tilillä tavallisessa keskustelussa. Silloin muisti ja aiemmat keskustelut yrityksestäsi vaikuttavat vastaukseen OpenAI:n oman dokumentaation mukaan, ja tulos on parempi kuin totuus. Toinen virhe on muuttaa kysymyksiä kesken jonon. Kun kysymys vaihtuu, vertailu edelliseen viikkoon katoaa, ja jäljelle jää kaksi eri otosta. Kolmas virhe on tulkita ensimmäistä viikkoa. Ei-deterministisyys tarkoittaa, että yksittäinen viikko voi olla poikkeama kumpaan suuntaan tahansa.

Neljäs, joka ei ole virhe vaan puute: sama protokolla kannattaa ajaa myös Google AI Modessa ja Perplexityssä, samoilla kysymyksillä ja samana päivänä. Silloin näet, onko nollatulos ChatGPT-kohtainen vai koskeeko se kaikkia. Näiden palvelujen personointiasetuksia ei ole käyty läpi tässä tekstissä, joten kirjaa niille erikseen, millä asetuksilla kysyit.

Miksi tämä ei ole työkalumyyntiä

Tekoälynäkyvyyden seurantatyökalut tekevät saman kuin tämä protokolla: ne esittävät kysymysjoukon mallille rajapinnan kautta ja laskevat, kuinka usein brändi mainitaan. Ero on, että työkalu tekee sen tuhannella kysymyksellä ja sinä kymmenellä. Mutta sekään ei poista ei-determinismiä, ja rajapinnan kautta esitetty kysymys ei näe samaa personointia kuin oikea käyttäjä. Työkalun “näkyvyysprosentti” on siis otos samasta epävarmuudesta, ei tarkempi totuus. Mitä raportilta kannattaa vaatia, on käsitelty artikkelissa mitä mittareita SEO/GEO-raportissa pitää olla.

Tämä sivusto ajaa protokollan itse. Ensimmäinen kirjaus tehdään launch-päivänä 22.9.2026, ja tuloksia ei vielä ole. Kun kahdeksan viikon jono on koossa, se julkaistaan tällä sivustolla sellaisenaan, myös silloin, jos tulos on nolla.

Kysymyksiä, joita tästä haetaan

Miksi ChatGPT vastaa eri tavalla, kun kysyn saman asian uudestaan?

Kielimallin vastaukset eivät ole oletuksena deterministisiä, ja OpenAI sanoo itse, että toistettavuus on parhaan yrityksen varassa. Lisäksi ChatGPT voi muokata hakukyselyä muistin ja likimääräisen sijainnin perusteella. Siksi testi tehdään väliaikaisessa keskustelussa ja toistetaan.

Tarvitsenko maksullisen työkalun tekoälynäkyvyyden seuraamiseen?

Et pienen yrityksen tarpeisiin. Kymmenen kysymyksen manuaalinen otos kerran viikossa vie noin 20 minuuttia ja kertoo, mainitaanko sinut ja mitkä sivut lainataan. Työkalu tekee saman automaattisesti, mutta sen luku on yhtä epävarma kuin omasi.

Lähteet

  1. OpenAI Cookbook: Reproducible outputs with the seed parameterMallin vastaukset ovat oletuksena ei-deterministisiä; seed on 'best effort', ei takuu
  2. OpenAI Help Center: Searching the web with ChatGPTSijainti IP-osoitteen perusteella; muisti voi muokata hakukyselyä; lähteet-näkymä
  3. OpenAI Help Center: Memory FAQVäliaikaiset keskustelut eivät luo muistoja; muisti voi vaikuttaa hakukyselyyn
  4. OpenAI: Overview of OpenAI crawlersOAI-SearchBot: estetyt sivustot eivät näy ChatGPT:n hakuvastauksissa

Löysitkö virheen?

Tämän tekstin kirjoitti kone ja toinen kone tarkisti faktat. Ihminen ei ole lukenut jokaista tekstiä. Jos jokin on väärin, kerro — ilmoitus menee Ilkka Immoselle, korjaus tehdään ja se merkitään tähän tekstiin näkyviin.

Sama menetelmä on myytävänä.

Jos löysit tänne hakukoneen tai tekoälyn kautta, näit jo tuloksen. Cosmic Thing tekee saman sinun yrityksellesi: verkkosivut, joista näet vaihtoehdot ennen buildia, ja sisältökoneen, joka tarkistaa omat faktansa ja kertoo sen lukijalle.

Pyydä tarjousKuka tämän takana on