¿Cómo se puede hacer para que el papá de mi hijo pierda la patria potestad?

Mi hijo tiene 5 años y desde muy pequeño ha estado en hospitales. Él nació en Sinaloa, pero por su condición debió vivir en la Ciudad de México desde los 7 meses de nacido. en el año 2014 el sr. pidió el divorcio, donde se dió como resolución que el sr. no podía ver al niño si no era bajo mi supervisión y que debía pagar una pensión del 35%, actualmente en el 2016 solicita disminución de pensión alimenticia alegando que no se le deja ver al niño, pero desde que el niño salió de una neumonía donde perdió medio pulmón izquierdo (en el mes de noviembre del 2015), el sr. no se había comunicado ni tenido intención de ver a su hijo. Ahora en abril del 2016 el sr. dice que no se le ha dejado ver al menor cuando por su condición de salud no se ha podido mover al niño de la Ciudad de México, y por la demanda interpuesta, se me obliga a mi como madre detener el tratamiento medico para ir al Estado de Sinaloa a contestar la demanda y la verdad es que es muy desgastante, porque cuando el niño está en el hospital el sr. nunca lo va a cuidar o llegar a comunicarse para saber cómo esta el niño, mi pregunta es ¿cómo puedo hacer para que legalmente el sr, no tenga derecho y si es necesario ni obligaciones con el niño?