3 Incheckningar (fcdc0abd22259b4aa6213a088989bbd1f9c922bd)

Upphovsman SHA1 Meddelande Datum
  Ben Kurtovic dd199c4389 Fix tokenizer tests with setup.py test. 11 år sedan
  Ben Kurtovic 9e527146c7 Tokenizer tests for comments. 11 år sedan
  Ben Kurtovic a0fb8361eb Can specify specific tokenizer tests via the command line; add files 11 år sedan