Exemplo n.º 1
0
 def tokenStream(self, analyzer: Analyzer):
     return analyzer.tokenStream(self.name(), [self.text])
Exemplo n.º 2
0
 def tokenStream(self, analyzer: Analyzer):
     return analyzer.tokenStream(self.name(), self.contents)