Kuidas me katsetasime
Kaks päris salvestist: 48-minutiline eestikeelne vajaduste kaardistamise kõne ja 27-minutiline ingliskeelne kliendikõne, mille keskel oli kolmeminutiline eestikeelne kõrvalvestlus. Iga salvestist töödeldi üks kord kummagi tööriistaga. Osalejad ja nende ärilised andmed on anonüümitud.
Võrdluse piirangud
Meil ei olnud sõltumatut võrdlustranskriptsiooni. Joondamiseks kasutasime oma väljundit, seega ei ole see erapooletu täpsusvõrdlus. Näited kirjeldavad kahte katsetatud salvestist ega näita teenusepakkujate üldist täpsust.
Mida me täheldasime
01Kuus kõnelejamärgist kolme inimese kohta
Ingliskeelse kõne ajal oli ruumis kolm inimest. MeetGeeki ekspordis oli kuus kõnelejaidentiteeti, sealhulgas üks, kellele omistati ütlemata teksti. Ligikaudu iga üheksas repliik jäi märkega „Unknown speaker“. Seda saab kontrollida MeetGeeki failist ilma meie transkriptsioonita. Teneks tagastas kolm nimega kõnelejat.
Eestikeelse salvestise puhul tagastas MeetGeek kolm märgist. Teneks tagastas kolm märgist ja jättis kuus lühivastust omistamata.
02106-sõnaline kordusjada
Ligikaudu iga kahekümne kuues sõna MeetGeeki eestikeelses transkriptsioonis kuulus kordusjadasse: ühe sõna 106-tokeniline ja teise sõna 84-tokeniline kordus. Need esinesid kõne lõpuminutites. Teneksi pikim jada samal helil oli viis kordust sõnast, mida kõneleja ütleski viis korda.
Kordus on selle salvestise ekspordis. Me ei ole kindlaks teinud selle põhjust.
03Kolm minutit eesti keelt muutus väljamõeldud ingliskeelseks tekstiks
Ekraanijagamise ootel rääkisid kaks osalejat umbes kolm minutit omavahel eesti keeles. Selle lõigu puhul ei tuvastanud MeetGeek keelevahetust. Väljundis olid ladusad ingliskeelsed laused, mida ei öeldud, omistatud ruumis mitte viibinud kõnelejale. Ühest eestikeelsest sõnast sai „What’s up? What’s up? What’s up?“
Seda tulemust hinnates võrdle viidatud heli ekspordiga.
Mida see katse ei näita
Kahe salvestise põhjal ei saa tuvastada transkriptsioonivea põhjust ega ennustada tulevase mudeli toimimist. Tulemust võivad mõjutada heliolud, seadistus ja tooteversioon. Korda katset oma meeskonna vestlusi esindavate salvestistega.
Millal kaaluda MeetGeeki
Kui vajad eelkõige ladusat kokkuvõtet selgest ühekeelsest ingliskeelsest koosolekust, võib erinevus olla väiksem. Meie võrdluses eemaldas MeetGeek kõne takerdumisi ja tekst oli sujuvam. Teneksi sõnasõnalisem väljund sobib detailseks ülevaatuseks, kuid seda on aeglasem sirvida. Ingliskeelsel kõnel oli MeetGeeki korduste käsitlemine veidi parem kui Teneksil.
Teneksit tasub katsetada mitmekeelsete koosolekute ja keerulise heliga, kui järgmised tegevused toetuvad vestluse täpsele sisule.
Mida me ei väida
Ka Teneks tegi vigu, sealhulgas kordusi ja kõneleja omistamise vigu. Mõlemad tööriistad kirjutasid ingliskeelsel kõnel ühe olulise ettevõttenime valesti. Hinda neid piiranguid koos eespool toodud erinevustega.