Võrdlus

Teneks vs MeetGeek

Enamik võrdluslehti on funktsioonitabel, mida keegi kontrollida ei saa. See siin on kaks salvestust, mõlemad tööriistad ja mõlema väljund — kaasa arvatud need osad, mis meile au ei tee.

Enne tulemusi: kuidas me testisime

Kaks päris salvestust: 48-minutiline eestikeelne kaardistuskõne ja 27-minutiline ingliskeelne kliendikõne, mille keskel oli kolmeminutiline eestikeelne kõrvalvestlus. Kumbki salvestus töödeldi mõlema tööriistaga, üks kord kummagagi. Osalejad ja nende äriline info on läbivalt anonüümitud.

Koht, mille kallal tasub norida

Kummalgi kõnel ei ole sõltumatut inimese tehtud transkriptsiooni, seega kasutasime võrdlusalusena oma väljundit. Konkurendi hindamine oma tulemuse vastu ei ole neutraalne võrdlus ja me ei hakka teesklema vastupidist. Just seepärast toome esile kolm allolevat leidu: ükski neist ei sõltu sellest, kumba transkriptsiooni sa õigeks pead.

Kolm leidu, mis kehtivad ka ilma igasuguse võrdlustranskriptsioonita

01

Kuus kõnelejasilti kolme inimese kohta

Ingliskeelses kõnes oli ruumis kolm inimest. MeetGeeki eksportfail sisaldab kuut erinevat kõnelejat, kaasa arvatud üht, mille alla on kantud juttu, mida keegi ei öelnud, ja jätab umbes iga üheksanda lõigu „tundmatu kõneleja“ alla. See on loendatav omadus nende enda failis — meie transkriptsiooni pole selle kontrollimiseks vaja. Teneks tuvastas kolm kõnelejat, nimeliselt.

Eestikeelses kõnes pöördub olukord osalt vastupidiseks: MeetGeek annab täpselt kolm silti ja meie kolm pluss kuus lühikest omistamata taustareplikki. Me ei hakka tsiteerima ainult seda poolt, mis meile sobib.

02

106-sõnaline korduste ahel

Umbes iga kahekümne kuues sõna MeetGeeki eestikeelses transkriptsioonis asub degenereerunud korduste jadas — 106 sõna pikkune ühe sõna müür ja 84 sõna pikkune teise oma. See satub kõne lõpuminutitesse, ossa, mida juht tegelikult loeb. Meie halvim jada samal helil on viis kordust sõnast, mille kõneleja päriselt viis korda ütles.

See on klassikaline väikese keele kõnetuvastuse kokkuvarisemine ja see on defekt mis tahes võrdlusaluse järgi — ka siis, kui võrdlusalust pole üldse.

03

Kolm minutit eesti keelt tuli tagasi väljamõeldud inglise keelena

Kui klient ootas ekraanijagamist, rääkisid kaks osalejat omavahel umbes kolm minutit eesti keelt. MeetGeek ei tuvastanud keelevahetust. See tootis soravaid ingliskeelseid lauseid, mida kunagi ei öeldud, ja omistas need kõnelejale, keda ruumis polnud — ühest eestikeelsest sõnast sai „What's up? What's up? What's up?“

Väljamõeldise tuvastamiseks ei ole võrdlustranskriptsiooni vaja. Just seda leidu tahaksime näidata turvatiimile või riskijuhile.

Miks see juhtub ja miks mudeliuuendus seda ei paranda

Kõik kolm tulenevad samast arhitektuurist: inglise keele keskne töötlusahel ühe deklareeritud koosolekukeelega ja ilma isikute tuvastuseta. Eesti keel jääb mudeli treeningandmete jaotusest välja ja keelevahetus kõne sees jääb täiesti väljapoole arusaama probleemist. Just seepärast on vahe tugeva ingliskeelse tööriistaga ingliskeelses kõnes väike ja eestikeelses põhimõtteline — ja seepärast ei ole see vahe, mis kellegi järgmise versiooniga kaob.

Millal MeetGeek on mõistlik valik

Kui su koosolekud käivad inglise keeles, ühes keeles, selge heliga ja püsiva osalejate ringiga, ja sa tahad pigem puhast loetavat kokkuvõtet kui tõenduslikku kirjet, siis vahe meie kahe vahel kahaneb tublisti. MeetGeek jätab parasiitsõnad ja komistused teadlikult välja ja tema teksti on sujuvam lugeda kui meie oma — meie transkriptsioonid on sõnasõnalised, mis on parem tõenduse ja coachingu jaoks ning halvem kiirlugemiseks. Ingliskeelses kõnes tuli ta kordustega toime isegi pisut paremini kui meie.

Meie kasuks räägib konkreetne olukord: mitmekeelsed ruumid, raske heli ja kirje, mille põhjal miski edaspidi tegutseb.

Mida me ei väida

Mitte veatut transkriptsiooni. Me jälgime oma vigu — kordusi kohtades, kus töötlusplokid kokku saavad, mõnda omistamise viga, lühikesi taustareplikke, mille jätame omistamata — ja parandame need avalikes versioonimärkmetes. Ingliskeelses kõnes kõige rohkem esile tulnud ettevõttenime puhul eksisid mõlemad tööriistad ühtemoodi. Kui teed selle võrdluse ise, leiad need asjad üles, ja me eelistame, et kuuled seda kõigepealt siit.

Tee sama test oma kõnega

Kasulik test ei ole meie oma. Võta salvestus, mis tavalise tööriista katki teeks — hübriidkoosolek, halb liin, kaks keelt ruumis — ja lase see läbi mõlema. Aitame sul selle üles seada.

Seitse põhjust, miks meeskonnad valivad Teneksi