Kuinka hyviä vastauksia tekoälyhaastattelu tuottaa?

Miksi vastausten laatu on oikea kysymys

Henkilöstökyselyiden avoimet kysymykset tuottavat tunnetusti lyhyitä ja yleisiä vastauksia: ”viestintää pitäisi parantaa”, ”liikaa prioriteetteja”. Johtoryhmä ei pysty toimimaan niiden pohjalta, koska niistä ei selviä missä, miksi tai mitä asia käytännössä tarkoittaa. Tekoälyhaastattelun lupaus on haastattelun syvyys kyselyn mittakaavassa. Lupaus pitää mitata, ei olettaa.

Siksi mittasimme sen. Otimme vastauksia todellisilta Insight Bridge -kierroksilta ja arvioimme jokaisen viidellä laatukriteerillä.

Miten vastaukset arvioitiin

Aineisto koostuu 15 Insight Bridge -tuotantokierroksesta marraskuun 2025 ja lokakuun 2026 väliltä. Kierrokset liittyivät strategian jalkautukseen, henkilöstön kuulemiseen ja johtamiseen. Niissä on yhteensä yli 21 000 sisällöllistä avointa vastausta viidellä kielellä. Jokaiselta kierrokselta poimittiin satunnaisesti 40 vastausta, ja niistä analysoitiin 570. Taustakysymykset, asteikkoarviot, loppuyhteenvedot ja pelkät kyllä- tai ei-vastaukset rajattiin pois.

Jokainen vastaus pisteytettiin asteikolla 1–5 viidellä kriteerillä:

• Osuvuus: vastaako vastaus kysymykseen ja siihen, mitä kysymyksellä haluttiin selvittää?
• Konkreettisuus: kuvaako se tiettyjä kokemuksia, tekoja tai esimerkkejä?
• Perustelut: selittääkö se, miten tai miksi jokin tapahtui tai on tärkeää?
• Konteksti: käyvätkö olosuhteet ilmi, kuten yksikkö, rooli, markkina tai ajankohta?
• Vastaajan tulkinta: käykö ilmi, mitä asia vastaajalle merkitsee ja miten hän sitä arvioi?

Kriteeri jätettiin arvioimatta, jos kysymys ei sitä edellyttänyt. Kaikki kysymykset eivät vaadi esimerkkiä tai selitystä. Pisteytyksen teki tekoälyarvioija (Anthropicin Claude), jonka piti perustella jokainen pistemäärä suorilla lainauksilla vastauksesta. Jokainen lainaus tarkistettiin koneellisesti vastaustekstiä vasten. Pituudesta ei saanut palkita, eikä yrityksen virallisen kielen myötäilystä saanut rangaista.

1. Ihmiset vastaavat kysymykseen ja kertovat, mitä asia heille merkitsee

Osuvuus oli vahvin kriteeri: 84 % vastauksista sai 4 tai 5 pistettä, ja vain 4 % sai 1 tai 2. Vastaajat pysyvät aiheessa ja vastaavat siihen, mitä kysyttiin, sen sijaan että ohjaisivat keskustelun muualle.

He myös ottavat kantaa. Vastauksista 60 % kertoi selvästi, miten vastaaja asian arvioi: toimiiko muutos, tuntuuko tavoite realistiselta, mikä huolettaa. Tämä on se osa vastausta, jonka numeroasteikko litistää ja jonka johtoryhmän eniten pitäisi kuulla.

2. Ensimmäinen vastaus selittää harvoin, miksi

Kolme kriteeriä jäi selvästi heikommiksi: perustelut, konkreettisuus ja konteksti. Yli puolet ensimmäisistä vastauksista esitti näkemyksen kertomatta, mitä sen taustalla on, ja alle joka neljäs antoi konkreettisen esimerkin.

Kyse ei ole vastaajien heikkoudesta. Näin ihmiset vastaavat avoimeen kysymykseen ensimmäisellä kerralla, niin kyselyssä kuin haastattelussa. Ensimmäinen vastaus kertoo, mitä ihminen ajattelee. Miksi, esimerkki ja olosuhteet tulevat yleensä vasta, kun joku kysyy.

3. Syvyys syntyy jatkokysymyksestä

Mitataksemme jatkokysymyksen vaikutusta arvioimme 124 vastausta kahdesti: ensin pelkän ensimmäisen vastauksen ja sitten saman vastauksen yhdessä jatkokysymykseen annetun vastauksen kanssa.

Parannus osui juuri sinne, missä ensimmäiset vastaukset olivat heikoimpia: kontekstiin, perusteluihin ja konkreettisuuteen. Osuvuus ja vastaajan tulkinta muuttuivat vähemmän, koska ne olivat jo valmiiksi korkealla.

Keskiarvot eivät kerro koko kuvaa. Katsotaan vastauksia, joista puuttui perustelu, esimerkki tai tieto siitä, missä asia näkyy. Jatkokysymyksen jälkeen yli puolet niistä sai puuttuvan osan. Kun vastaaja vastasi jatkokysymykseen kunnolla, osuus oli yli neljä viidestä.

Kaksi asiaa ratkaisee, kuinka paljon jatkokysymys tuo lisää. Ensimmäinen on vastaaja: kun hän vastasi jatkokysymykseen kunnolla, hyöty oli noin kaksinkertainen lyhyeen vastaukseen verrattuna. Toinen on lähtötaso: mitä ohuempi ensimmäinen vastaus, sitä enemmän jatkokysymys toi, kun taas valmiiksi kattavat vastaukset eivät juuri parantuneet. Toinen jatkokysymys samasta aiheesta suunnilleen kaksinkertaisti hyödyn, mutta kolmas ei enää tuonut lisää.

Tämä on tekoälyhaastattelun ja kyselyn ydinero. Kysely ottaa ensimmäisen vastauksen sellaisenaan. Haastattelija, oli se ihminen tai tekoäly, voi kysyä ”miltä se näyttää teidän yksikössänne?” tai ”miksi luulet, että niin käy?”, ja vastaus siihen kysymykseen on se, jonka pohjalta johtoryhmä voi toimia.

4. Suurin vipu: ohuiden vastausten syventäminen

Data näyttää myös, missä haastattelija voi parantaa. Ohuista ensimmäisistä vastauksista vain 30 % sai syventävän jatkokysymyksen. Keskitasoisista sen sai 50 % ja hyvistä 44 %.

Osin tämä on tarkoituksellista: haastattelija, joka tarttuu jokaiseen lyhyeen vastaukseen, alkaa tuntua kuulustelulta. Ohuet vastaukset ovat kuitenkin juuri niitä, joissa jatkokysymys tuo eniten, joten tämä on haastattelijan kehittämisessä selkein vipu.

5. Pidempi ei ole parempi, mutta selittäminen vie sanoja

Arvioijaa ohjeistettiin olemaan palkitsematta pituudesta. Silti pidemmät vastaukset olivat yleensä paremmin perusteltuja, koska syyn selittäminen vie enemmän sanoja kuin näkemyksen toteaminen. Pituus ei kuitenkaan yksin taannut laatua: myös osa enintään kahdentoista sanan vastauksista sai hyvät pisteet. Haastattelijalle tästä seuraa yksi oppi: kysy selitystä, älä pidempää vastausta.

6. Ei merkkejä väsymisestä

Pitkistä keskusteluista huolestutaan usein, että vastaukset ohenevat loppua kohti. Sitä emme nähneet: keskustelun lopun vastaukset olivat keskimäärin yhtä hyviä tai hieman parempia kuin alun vastaukset.

Mitä tämä tarkoittaa johtoryhmälle

• Saatte selville myös miksi, ette vain mitä. Kysely kertoo, että ihmiset epäilevät tavoitetta. Jatkokysymys kertoo, miksi he epäilevät. Kun haastattelija kysyi lisää, yli puolet perusteli näkemyksensä. Se on ero sen välillä, tietääkö muutosvastarinnasta vai tietääkö, mitä pitää korjata.
• Odottakaa havaintoja, jotka voi paikantaa. Jatkokysymys nosti perustelujen ohella eniten kontekstia: vastauksista selviää, missä yksikössä, roolissa tai markkinassa asia näkyy. Pyytäkää tulokset sillä tasolla, jolla strategia toteutuu, anonymiteetin rajoissa.
• Lukekaa vastaajien omaa arviota omana signaalinaan. Vastauksista 60 % kertoi, miten vastaaja asian arvioi: toimiiko muutos, tuntuuko tavoite realistiselta. Se kertoo uskosta ja sitoutumisesta, joita strategian jalkautuksessa on vaikeinta nähdä, eikä sitä kannata keskiarvoistaa yhteen lukuun.
• Rajatkaa laajuus heti alussa. Kun sovitte, mitä johtoryhmän tarvitsee saada selville, harvemmat teemat ja tilaa syventää tuottavat enemmän kuin pitkä kysymyslista. Toinen jatkokysymys samasta aiheesta suunnilleen kaksinkertaisti hyödyn.
• Pyytäkää nähdä näyttö. Jokaisen havainnon pitäisi olla jäljitettävissä siihen, mitä ihmiset todella sanoivat. Tässä pilotissa jokaisen pistemäärän takana on suora lainaus, ja saman vaatimuksen pitäisi koskea jokaista hallitukselle esitettävää havaintoa.

Pilotin rajoitukset

Kyseessä on ensimmäinen, sisäinen pilotti, ja lukuja kannattaa lukea sen mukaisesti. Kaikki pisteet ovat tekoälyarvioijien antamia. Toinen, riippumaton tekoälyarvioija pisteytti 100 vastausta uudelleen, ja sen pisteet olivat hyvin lähellä ensimmäisen arvioijan pisteitä: yksikään ei eronnut enempää kuin yhden pisteen. Kahden tekoälyarvioijan yksimielisyys ei silti ole sama asia kuin ihmisasiantuntijoiden arvio, joten seuraavaksi ihmisarvioijille on valmisteltu 50 vastauksen sokkoaineisto.

Jatkokysymys ei voi heikentää vastausta, koska alkuperäinen vastaus on aina mukana. Ne harvat tapaukset, joissa pisteet laskivat, johtuvat kahden arviointikerran tavallisesta vaihtelusta. Jatkokysymyksiä ei myöskään esitetty useammin heikoille vastauksille, joten tulos ei selity sillä. Lyhyet ”en tiedä” -vastaukset jätettiin pois ennen otantaa, joten pilotti ei kerro, kuinka usein ihmiset jättävät vastaamatta. Asiakkaiden nimiä tai vastaustekstejä ei julkaista.

Mihin Insight Bridge sopii

Insight Bridge on NAG:n tekoälyalusta strategian jalkautukseen ja henkilöstön kuulemiseen. Se käy tekoälyn johtamia keskusteluja koko organisaation kanssa yhtä aikaa, kyselyn nopeudella ja haastattelun syvyydellä, ja jokainen havainto on jäljitettävissä siihen, mitä osallistujat todella sanoivat. Tämä pilotti on osa sitä, miten pidämme tuon lupauksen rehellisenä: mittaamme vastausten laatua, julkaisemme havainnot ja kehitämme haastattelijaa siellä, missä data osoittaa sen jäävän vajaaksi.