que procedimiento debo seguir para obtener la patria potestad?

Soy de Colombia pero actualmente vivo en España, el padre de mi hija es Colombiano, la niña siempre ha vivido conmigo, él tiene una denuncia por impago de manutención, el esta en la cárcel y lleva 5 años allí, necesito la patria potestad por que queremos ir a mi pais, entrar y salir sin ningún problema, y para hacer el trámite del pasaporte Español le piden una autorización del padre, cuando el nunca se ha hecho cargo de ella.