Luego de la sentencia de divorcio no hice juicio por alimentos, que debo hacer

Eramos extranjeros, casados en el extranjero, ya estoy naturalizada, nos separamos hace 5 años y tuve problemas con el trámite de divorcio hasta que logré me dictarán sentencia de divorcio que salió hace 4 años, como hubo tanta negativa de parte de mi ex para el divorcio, tuve que aceptar que el apareciera como el que solicitó el divorcio. Por otro lado no se hizo juicio por alimentos y no aporta nada, sin embargo, se lleva a los hijos de vacaciones y no informa solo me entero por mi hija mayor que me dice que se van un día x. Que puedo hacer, puedo demandar, quitar patria potestad? No quiero tener más que ver con este tipo que tiene acuses de maltrato familiar y asalto con violencia a mi actual pareja