Ben Kurtovic
fb71f5507e
Support a 'use_c' field to explicitly disable the C tokenizer.
hace 11 años
Ben Kurtovic
054a84afe0
A bit of misc cleanup.
hace 11 años
Ben Kurtovic
718fcb24c8
Fix eight failing tests; all template parsing tests now passing ( #25 ).
hace 11 años
Ben Kurtovic
5a0a00ba98
Change the way verify_safe() handles template params ( #25 ).
- Newlines are now allowed in template param names.
- Changes also affect handling of arguments like {{{foo}}}.
- Update unit tests: remove some unnecessary ones, and add some to cover the changes.
- Update StringMixIn tests to actually work for some of the methods.
- Update copyright notices for the C extensions.
hace 11 años
Ben Kurtovic
9a87329d69
More tests for test_other_methods()
hace 11 años
Ben Kurtovic
e2fe0120ea
Some tests for test_other_methods()
hace 11 años
Ben Kurtovic
6e748004d1
test_types(), test_other_magics(); add range to compat
hace 11 años
Ben Kurtovic
221af8a9d7
Adding some tests to TestStringMixIn
hace 11 años
Ben Kurtovic
111a71f0c2
Committing an empty file to work on later.
hace 11 años
Ben Kurtovic
0803417901
Port CTokenizer's verify_safe method to Python to solve a failing test.
hace 11 años
Ben Kurtovic
acb7e57904
Make mwparserfromhell.parser() be an alias for parse_anything().
Some other changes, including removal of the 'string' import in the tokenizer.
hace 11 años
Ben Kurtovic
31a977bdfe
Finish all incomplete template tests.
hace 11 años
Ben Kurtovic
24c55aeeb1
Adding a syntax highlighter for the test-case format.
hace 11 años
Ben Kurtovic
556477f801
Adding a bunch more tests.
hace 11 años
Ben Kurtovic
660a0c31e6
Adding a bunch more tests.
hace 11 años
Ben Kurtovic
d500f8972e
Add a few more tests; use assert*(expected, actual) instead of opposite.
hace 11 años
Ben Kurtovic
713b83a4d9
Added a metric ton of template tests; adjustments; docstrings.
hace 11 años
Ben Kurtovic
eb1bd6b281
Add some basic tests for templates; adjust error messages again.
hace 11 años
Ben Kurtovic
ecfb2c628f
Another test; handle errors when reading output line better.
hace 11 años
Ben Kurtovic
357b6dc447
Make unit tests work in Python 3; add a unicode text test.
hace 11 años
Ben Kurtovic
4636fbeb4a
Built an infrastructure for loading and running tokenizer tests.
hace 11 años
Ben Kurtovic
fb7567d6d0
Some empty testcases.
hace 11 años
Ben Kurtovic
28b124a96c
Restarting work on unit tests with a test covering doc examples.
hace 11 años
Ben Kurtovic
357e421fe8
Text nodes should now appear a bit better in tree form.
hace 11 años
Ben Kurtovic
d6f2723a06
Fix safety checks on template params in some odd cases ( closes #24 ).
Also, fix parsing of wikilinks in both tokenizers such that newlines
in any location within the title are an automatic failure.
hace 11 años
Ben Kurtovic
cd5cc6a7d0
Update copyright notices for 2013.
hace 11 años
Ben Kurtovic
11cf5def75
Fix handling of sections headers with equal signs ( closes #20 )
hace 12 años
Ben Kurtovic
6881caf0bd
Fix StringMixIn's methods taking option arguments (thanks Sigma).
hace 12 años
Ben Kurtovic
06d3036de2
Fix a certain bug in SmartList with Py3k ( closes #17 )
hace 12 años
Ben Kurtovic
dab6cc39ef
Fix handling of errors when parsing template param keys ( closes #13 )
hace 12 años
Ben Kurtovic
1f47e10f04
Start some Py3k compatibility stuff.
hace 12 años
Ben Kurtovic
eba76dc05c
Merge branch 'feature/speedup' into develop
hace 12 años
Ben Kurtovic
ca11d77efd
Shorten some longer lines.
hace 12 años
Ben Kurtovic
4a725b7ac5
Fix another couple bugs regarding template contexts and verify_safe().
hace 12 años
Ben Kurtovic
1abdb478c9
Fix a couple bugs.
hace 12 años
Ben Kurtovic
88a2b95030
Remove a bunch of white space.
hace 12 años
Ben Kurtovic
3a6335d969
Clean up init_tokenizer().
hace 12 años
Ben Kurtovic
06f02b9753
Clean up whitespace / newlines.
hace 12 años
Ben Kurtovic
0e78571672
Forgot to check numeric/hexadecimal entities for string chars.
hace 12 años
Ben Kurtovic
a1e6dfcef6
Ensure that there is null terminator at the end of entitydefs.
hace 12 años
Ben Kurtovic
19e7c3b6ac
Fix type.
hace 12 años
Ben Kurtovic
06b20dd8c0
More updates.
hace 12 años
Ben Kurtovic
16024494cf
Mostly implement Tokenizer_really_parse_entity().
hace 12 años
Ben Kurtovic
087d606097
Recover failing contexts when due to a template or link opening.
hace 12 años
Ben Kurtovic
7de34ed5a6
Rewrite verify_safe completely.
hace 12 años
Ben Kurtovic
b2f933dddc
Fix memory leak.
hace 12 años
Ben Kurtovic
76b299e4fa
Sync from upstream ( 6413ae21da
); some doc updates.
hace 12 años
Ben Kurtovic
6413ae21da
Should have used the param's name here instead of its value.
hace 12 años
Ben Kurtovic
c5fea8ea34
Render the entire textbuffer correctly.
hace 12 años
Ben Kurtovic
cdef073a9b
Replace textbuffer with our own datastructure.
hace 12 años