示例#1
0
 def teste_com_pontuacao(self):
     texto = 'ola, tudo bem?'
     self.assertEqual(['ola', 'tudo', 'bem'], plagio.tokenizar(texto))
示例#2
0
 def teste_string_vazia(self):
     texto = ''
     self.assertEqual([], plagio.tokenizar(texto))
示例#3
0
 def teste_tokenizacao(self):
     texto = 'ola tudo bem'
     self.assertEqual(['ola', 'tudo', 'bem'], plagio.tokenizar(texto))
示例#4
0
 def teste_com_maiusculas(self):
     texto = 'Ola, tudo bem?'
     self.assertEqual(['Ola', 'tudo', 'bem'], plagio.tokenizar(texto))
示例#5
0
 def teste_com_acento_o(self):
     texto = u'olá, tudo bem? ação orações'
     self.assertEqual([u'olá', u'tudo', u'bem', u'ação', u'orações'],
                      plagio.tokenizar(texto))
示例#6
0
 def teste_com_pontuacao(self):
     texto = 'ola, tudo bem?'
     self.assertEqual(['ola', 'tudo', 'bem'], plagio.tokenizar(texto))
示例#7
0
 def teste_tokenizacao(self):
     texto = 'ola tudo bem'
     self.assertEqual(['ola', 'tudo', 'bem'], plagio.tokenizar(texto))
示例#8
0
 def teste_string_vazia(self):
     texto = ''
     self.assertEqual([], plagio.tokenizar(texto))
示例#9
0
 def teste_com_acento_o(self):
     texto = u'olá, tudo bem? ação orações'
     self.assertEqual([u'olá', u'tudo', u'bem', u'ação', u'orações'],
                      plagio.tokenizar(texto))
示例#10
0
 def teste_com_maiusculas(self):
     texto = 'Ola, tudo bem?'
     self.assertEqual(['Ola', 'tudo', 'bem'], plagio.tokenizar(texto))