Esempio n. 1
0
 def do(t, out):  # shortener
     self.failIf(tokenize_text(t) != out)
Esempio n. 2
0
 def tokenize(self, text):
     return tokenize_text(text)
Esempio n. 3
0
 def tokenize(self, text):
     return tokenize_text(text)
Esempio n. 4
0
 def do(t, out):  # shortener
     self.failIf(tokenize_text(t) != out)