Me pueden correr de una vivienda con menores de edad?

Hola me separe de mi pareja no estamos casados y el me trajo a vivir a un inmueble que le quedo de herencia de su tia a su madre. El es alcoholico y violento y decidio con su madre sacarme de la casa donde tengo 2 menores de edad fruto de mi relacion anterior y con wl tengo una bebé de 1 año y 4 meses....quiero saber si es cierto que me pueden correr.???
Yo sufría actos de violencia de su parte y contemplados por la madre aduciendo que yo lo provocaba al hijo para que me pegue... su madre quiere correrme de la casa.