Toki

Użyj poniższego opisu do cytowania zasobu albo wyeksportuj go w wybranym formacie:
Radziszewski, Adam and Śniatowski, Tomasz, 2010, Toki, CLARIN-PL Repository, http://hdl.handle.net/11321/32.
Data
2010-08-11
Języki
Opis
Toki is a configurable tokeniser, i.e. a module for segmentation of running text into tokens (word-like units) and sentences.