Programmi di ewbtokenfactory.sf.net

EWBTokenFactory per PHP è un tokenizer incluso negli spazi vuoti. La maggior parte dei tokenizer afferra ogni parola come token e rilascia gli spazi vuoti. Questo tokenizer tokenizzerà anche gli spazi in mezzo nei propri toke