コード例 #1
0
ファイル: sources.py プロジェクト: clamor/psj.content 
 def getTermByToken(self, token):
     key = untokenize(token)
     return self.getTerm(key)
コード例 #2
0
ファイル: test_utils.py プロジェクト: ulif/psj.content 
 def test_simple_stream(self):
     result = untokenize(tokenize("abc"))
     self.assertEqual(result, "abc")
コード例 #3
0
ファイル: test_utils.py プロジェクト: ulif/psj.content 
 def test_utf8_stream(self):
     result = untokenize(tokenize("äöü"))
     self.assertEqual(result, "äöü")
コード例 #4
0
ファイル: test_utils.py プロジェクト: ulif/psj.content 
 def test_empty_string(self):
     result = untokenize(tokenize(""))
     self.assertEqual(result, "")