Esempi in Python per get_token_offsets

Esempio n. 1

 def test_get_token_offsets_simple(self):
     sentence = sentence_factory("""
         x 1 x
         x 4 x
         x 8 x
         x 3 x
     """)
     X = get_token_offsets([sentence])
     self.assertEqual(X, [1, 4, 8, 3])

Esempio n. 2

 def test_get_token_offsets_invalid_data(self):
     with self.assertRaises(KeyError):
         get_token_offsets([[{"aaa": "bbb"}]])

Esempio n. 3

 def test_get_token_offsets_empty(self):
     self.assertEqual(get_token_offsets([]), [])