Если вы хотите получить ответ по электронной почте, пожалуйста, оставьте свой адрес.
Спасибо, мы получили ваш отзыв.
tekstitöötluse algetapp ja protsess, mille käigus sisendtekst lammutatakse või viilutatakse väiksemateks matemaatilisteks baasüksusteks (tokeniteks), võimaldades mudelil teisendada inimkeelne tekst arvutile arusaadavaks numbriliseks andmejadaks
tokeniseerimine . Kooliinformaatika terminibaas. Институт эстонского языка, Сынавееб 2026. https://sonaveeb.ee/search/unif//eiops/tokeniseerimine/1/est (12.08.2026)
