Maailma parimad allalaaditavad tehisarumudelid konkureerivad juba kõige võimekamate kommertsmudelitega. Eesti keeles on pilt aga teistsugune: EKI testides pole parimate avatud ja suletud mudelite vahe viimase pooleteise aasta jooksul sisuliselt vähenenud. 

Viimastel nädalatel pälvis palju tähelepanu salapärane keelemudel Ox Alpha, mis osutus hiljem avatud kaaludega GLM-5.3 Flashiks. Rahvusvahelistes testides on see jõudnud väga lähedale maailma parimatele mudelitele. Lisaks on tegemist avatud mudeliga – seda saab alla laadida ning kasutada enda arvutis või serveris. 

Suletud mudeleid kasutatakse seevastu enamasti teenuste, näiteks ChatGPT või Claude’i kaudu ning mudel ise jääb selle arendaja kontrolli alla. Avatud mudel annab kasutajale rohkem võimalusi hoida nii andmed kui ka tehisaru toimimine enda kontrolli all. 

Lisasime GLM-5.3 Flashi ka EKI keelemudelite mõõdupuule. Eesti keele oskuse ja Eesti-alaste teadmiste testides olid tulemused aga märksa tagasihoidlikumad. Mudel jäi ligikaudu GPT-4 tasemele ehk sinna, kus parimad suletud mudelid olid umbes kolm ja pool aastat tagasi. 

See näide toob esile laiema probleemi. Rahvusvahelistes testides on avatud mudelid viimastel aastatel suletud mudelitele kiiresti järele jõudnud. Eesti keeles ei ole sama arengut näha. 

EKI testides on igal ajahetkel parima avatud ja parima suletud mudeli vahe püsinud 2024. aasta lõpust tänaseni umbes 18 protsendipunkti juures. Mõlemad on küll paremaks läinud, kuid nendevaheline lõhe pole sisuliselt vähenenud. Eesti-alaseid teadmisi mõõtvates testides on erinevus veel suurem. 

Praegu kuulub avatud mudelite tippmark eesti keeles DeepSeek V4 Pro-le, kuid selle kohalik kasutamine nõuab sisuliselt andmekeskuse tasemel riistvara. Sarnane olukord on teiste suuremate ja võimekamate avatud mudelitega. Kõnekas on ka väiksemate avatud mudelite seis: uuemad Qweni, Mistrali ja Google Gemma seeria mudelid jäävad ligikaudu GPT-3.5 tasemele või sellest allapoole. 

Miks see oluline on? Avatud mudeleid vajavad muu hulgas organisatsioonid, kes ei taha või ei tohi oma andmeid töötlemiseks välisele teenusepakkujale saata. Kohalikult töötav mudel võimaldab hoida andmeid enda kontrolli all ning annab rohkem võimalusi tehisaru oma vajadustele kohandada. 

Eesti keeles tähendab see praegu sageli keerulist kompromissi. Parima kvaliteedi saamiseks tuleb enamasti kasutada väliseid suletud teenuseid, samal ajal kui kohalikult kasutatavad avatud mudelid jäävad eesti keeles neile võimekuselt alla. Teatud asutuste puhul, eriti riigisektoris, on aga vaja korraga nii andmete turvalisust, head kvaliteeti kui ka tugevat eesti keele oskust. 

See olukord ei ole paratamatu. Avatud keelemudelite kohalik kasutatavus sõltub eestikeelsete andmete kättesaadavusest ja sellest, kas avatud mudeleid Eesti jaoks sihipäraselt arendatakse. Keele digitaalne elujõud ja tehnoloogiline sõltumatus käivad siin käsikäes. 

Vaata kõiki tulemusi EKI keelemudelite mõõdupuult: moodupuu.eki.ee