El padre no quiere ver a su hija

Hola!!
Tengo tres años separada de mi esposo y en esos años el no se ha hecho responsable del todo de la niña y últimamente ya tiene como 8 meses que la dejó de ver.
Anteriormente el la veía una ves a la semana, cada dos semanas o una ves al mes y pues mi duda es si se le pudieran quitar los derechos sobre la niña ya que yo siempre hago porque conviva con nuestra hija pero el simplemente no quiere.