Tekoälyn tuottama teksti vaatii tarkistuksen
– Yleisimmät tekoälymittarit eivät erota merkitystä muuttavaa muutosta harmittomasta muutoksesta, kertoo väitöstutkija Alexandra Dahlberg.
Tekoäly voi keventää lääkärin kirjaamistyötä, mutta sen kirjoittaman tekstin laadun mittaaminen on vaikeampaa kuin luulisi. Tämä selviää lääkäri Alexandra Dahlbergin väitöstutkimuksesta.
Hän tutki muun muassa keksittyjen epikriisien avulla, millä menetelmillä tekoälyn tuottaman tekstin laatua kannattaa arvioida. Kun hän esimerkiksi vaihtoi jonkin sanan tilalle synonyymin, kuten ”ei kuumetta” ja ”kuumeeton”, eivät yleisimmät mittarit välttämättä ymmärtäneet sitä. Pienikin sanan vaihto voi muuttaa merkityksen jopa päinvastaiseksi, vaikka hyvän mittarin pitäisi erottaa nämä toisistaan.
– Yleisimmät tekoälymittarit eivät erota merkitystä muuttavaa muutosta harmittomasta muutoksesta. Ne laskevat, kuinka paljon samoja sanoja teksteissä on. Siksi ne antavat huonon arvion myös tekstille, joka sanoo saman asian eri sanoin. Automaattinen arviointi auttaa vertailemaan ja testaamaan työkaluja, mutta lääkärin omaa tarkistusta se ei korvaa, sanoo Dahlberg.
Hän kuitenkin suosittelee tekoälyn käyttöä vastaanottotyössä, koska hän on kokenut omassa työssään, että se nopeuttaa lääkärin työtä.
– Itselleni tekoälyn käyttö on ollut erittäin hyvä apu vastaanottotyössä terveyskeskuksessa, kun potilaita tulee puolen tunnin välein. Arvioisin, että se vapauttaa yhteensä 30 minuuttia päivässä, jolloin ehdin pitää kahvi- ja lounastauon. On tärkeää, että käyntitekstin voi kirjoittaa heti, kun potilas on lähtenyt vastaanotolta. Muuten kaikki kirjaaminen jää työpäivän päätteeksi.
Dahlbergin mukaan terveydenhuolto tarvitsee yhä enemmän tekoälytyökaluja, koska nykyiset resurssit eivät riitä, jos palvelut halutaan säilyttää nykytasolla.
Pienet kielet vaikeuttavat toimintaa
Tutkimuksessa kävi ilmi, että tekoälyn tuottaman tekstin käytetyimmät arviointimenetelmät toimivat englanniksi paremmin kuin pienillä kielillä, ja suurin osa tutkimusdatasta on englanniksi. Siksi englanninkielisiä tuloksia ei voi suoraan siirtää Suomeen, vaan menetelmät kannattaa testata myös suomenkielisellä aineistolla.
– Yllättävää oli, että osa menetelmistä heikkeni ruotsiksi lähes yhtä paljon kuin suomeksi. Vaikka tekoälyn toiminta englanniksi olisi sujuvampaa ja luotettavampaa, kannattaa terveydenhuollossa kuitenkin käyttää äidinkieltä, jotta tiedot voidaan siirtää esimerkiksi Omakantaan potilaiden luettavaksi.
Tutkimuksessa kävi myös ilmi, että upotusmalleilla eli malleilla, jotka muuttavat tekstin numeroiksi esimerkiksi tiedonhakua varten, on eroja.
– Kahdeksan upotusmallia näytti keskimäärin lähes yhtä hyviltä. Kun kävin tapaukset läpi yksitellen, paras malli toimi joka kerta oikein, mutta heikoin erehtyi noin joka kahdeksannessa vertailussa.
Chat-vastaanotot halvempia
Dahlbergin tutkimusaineistossa käsiteltiin myös digivastaanottojen kustannustehokkuutta.
Aineistona oli Harjun terveyden perusterveydenhuollon käynnit toukokuusta 2023 syyskuuhun 2024. Harjun terveys on Päijät-Hämeen hyvinvointialueen ja Mehiläisen yhteisyritys. Aineistossa chatista alkava hoito oli edullisempaa myös silloin, kun jatkokäynnit laskettiin mukaan.
– Harjun terveydessä chatista alkava hoito oli lievissä akuuteissa vaivoissa keskimäärin lähes neljänneksen halvempaa kuin vastaanotolta alkava. Hengitystieinfektioissa säästö oli pienin ja jatkokäyntejä tuli hieman enemmän.
Tekoälyn käyttö hyvinvointialueilla vaihtelee. Esimerkiksi Länsi-Uudenmaan hyvinvointialueella ja Harjun terveydessä sitä on pilotoitu paljon. Eniten tekoälyä käytetään kirjaamiseen. Siitä on apua myös tiivistelmien teossa.
Tekoälyn käyttö yleistyy myös ennakoivassa terveydenhuollossa, jossa halutaan löytää hoitoa tarvitsevia. Tällaisella ennakoinnilla on tavoitettu muun muassa potilaita, jotka hyötyisivät kroonisen munuaistautiin hoidosta.
Dahlbergin mukaan tulevaisuudessa tekoälyn avulla voidaan saada tiivistelmä potilaan hoitohistoriasta lääkärille ennen kuin potilas saapuu vastaanotolle, mikä vapauttaisi lääkärin aikaa potilastyöhön. Tekoälyä on mahdollista hyödyntää myös lausuntojen kirjaamisessa ja lähettämisessä niin, että esimerkiksi B-lausunnon voisi laittaa yhdellä painalluksella eteenpäin, kun siihen nyt tarvitaan monta vaihetta ja kopiointia.
– Tulevaisuudessa myös tekoälyavusteinen diagnostiikka on mahdollista, mutta ensin terveydenhuollossa tulisi ottaa käyttöön muut lääkärin työtä helpottavat asiat, sanoo Dahlberg.
