Traerse a sus hijos sin tener problemas con el padre

Quiero invitar a una mujer a mi casa con la intención de quedarse a trabajar ya que el requisito para ello es estar aquí y en futuro traerse a sus hijos a vivir todos en mi casa. ¿Puedo tener algún problema con el padre si se los trae ya que él se despreocupa totalmente de ellos, solo los ve cuando le apetece y no ayuda a su madre en nada? ¿Qué documento debe tener la madre para traérselos aquí sin que el padre pueda reclamarlos? Muchas gracias.