Python tokenize_primaryの例

コード例 #1

ファイル: testexport.py プロジェクト: aymara/verbenet-editor

 def test_preposition(self):
     self.assertEqual(list(tokenize_primary("NP V de V-inf")), ["NP", "V", {"de"}, "V-inf"])

コード例 #2

ファイル: testexport.py プロジェクト: aymara/verbenet-editor

 def test_qu(self):
     self.assertEqual(list(tokenize_primary("NP V Qu Psubj")), ["NP", "V", "Qu", "Psubj"])

コード例 #3

ファイル: testexport.py プロジェクト: aymara/verbenet-editor

 def test_simple_split(self):
     self.assertEqual(list(tokenize_primary("NP V NP")), ["NP", "V", "NP"])