Selaa lähdekoodia

Ensure the text is stripped properly.

tags/v0.2
Ben Kurtovic 10 vuotta sitten
vanhempi
commit
2dfdf1bd4a
1 muutettua tiedostoa jossa 1 lisäystä ja 1 poistoa
  1. +1
    -1
      earwigbot/wiki/copyvios/parsers.py

+ 1
- 1
earwigbot/wiki/copyvios/parsers.py Näytä tiedosto

@@ -64,7 +64,7 @@ class ArticleTextParser(BaseTextParser):
"""
wikicode = mwparserfromhell.parse(self.text)
clean = wikicode.strip_code(normalize=True, collapse=True)
self.clean = clean.replace("\n\n", "\n") # Collapse extra newlines
self.clean = clean.replace("\n\n", "\n").strip()
return self.clean

def chunk(self, nltk_dir, max_chunks, max_query=256):


Ladataan…
Peruuta
Tallenna