예제 #1
0
 def tokenStream(self, analyzer: Analyzer):
     return analyzer.tokenStream(self.name(), [self.text])
예제 #2
0
파일: TextField.py 프로젝트: wtl-zju/IR_ZJU 
 def tokenStream(self, analyzer: Analyzer):
     return analyzer.tokenStream(self.name(), self.contents)