Puede mi ex pareja quitarme a mi hijo?

Registre a mi hijo como madre soltera por que el no tenía INE (no estamos casados).
Cuando el bebé cumplió un año yo lo dejé y me fui a vivir con mis Padres, ahora que el niño tiene 10 años quiere conocerlo. Pero en todos estos años nunca me ayudo económicamente y tampoco estuvo pendiente del niño.
Al dejarlo me amenazaba de muerte y que me quitaría a mi hijo, y yo lo demande. (Las autoridades ya no hicieron nada, pero la demanda existe). Después me enteré que ya tenía antecedentes por robo con violencia.
Aún así puede exigir los derechos de Padre?.