Adiciona remoção de hífen não codificado

Erickson Silva
1 parent e86fa40a
Showing 1 changed file with 1 additions and 1 deletions Show diff stats
src/ClassificaSentencas.py
@@ -44,7 +44,7 @@ class ClassificaSentencas(object):
 		"""Decodifica string utilizando utf-8, retornando uma lista de tokens em unicode.
 		"""
 		try:
-			decodificada = s.translate(None, "“”«»’‘º").decode("utf-8")
+			decodificada = s.translate(None, "“”«»–’‘º").decode("utf-8")
 		except UnicodeDecodeError:
 			decodificada = s.replace("“","").replace("”","").replace("«","").replace("»","").replace("’","").replace("‘","").replace("º","").decode("utf-8")
 		except:
...	...	@@ -44,7 +44,7 @@ class ClassificaSentencas(object):
44	44	"""Decodifica string utilizando utf-8, retornando uma lista de tokens em unicode.
45	45	"""
46	46	try:
47		- decodificada = s.translate(None, "“”«»’‘º").decode("utf-8")
	47	+ decodificada = s.translate(None, "“”«»–’‘º").decode("utf-8")
48	48	except UnicodeDecodeError:
49	49	decodificada = s.replace("“","").replace("”","").replace("«","").replace("»","").replace("’","").replace("‘","").replace("º","").decode("utf-8")
50	50	except:
...	...