def test_simplify_record(self): normalizer = SimplifyNormalizer(attr_index=1, lemmas=FRENCH_LEMMAS) self.assertEqual(['a1', u"aimer frites pomme scoubidou"], normalizer.normalize(['a1', u"J'aime les frites, les pommes " "et les scoubidous !"]))
def test_simplify(self): normalizer = SimplifyNormalizer(lemmas=FRENCH_LEMMAS) self.assertEqual(normalizer.normalize(u"J'aime les frites, les pommes et les scoubidous !") , u"aimer frites pomme scoubidou")