et

token

1 NEW 2022

Terminological databases

Kooliinformaatika terminibaas

ID 1186445 Last modified 11.08.2026
View dataset
View dataset
  • suurtes keelemudelites kasutatav teksti matemaatiline baasüksus (sõna, sõnaosa, tähemärk või kirjavahemärk), milleks mudel sisendteksti enne töötlemist või genereerimist tükeldab

Word forms

Inflection Type 2e

token tokenid
tokeni tokenite
tokenit tokeneid

Notes

Sobivad kirjakujud on nii token kui ka tooken. Token on tulnud eesti keelde inglise keelest. Kasutuses on sagedam token.

Eesti keele ühendkorpuse (2023) järgi on kirjakuju token väga sagedane ja tooken harv.

Last modified 09.10.2025

Etymology not available

Related words not available

Search the same word

in the EU's IATE term base
Searching web examples...
Searching translated usage examples...