Después de firmar un acuerdo privado, me pide que venda el piso

LLevo pagando mi piso son mas de 10 años, es una vivivienda compartida con mi ex-pareja, el cual, me hizo firmar un documento privado por el que el se desvinculaba del pago de la vivienda aun teniendo en cuenta que continuaría en la hipoteca.
Ahora me reclama que quiere salir de la hipoteca y me quiere obligar a vender el piso o comprar su parte, ambas cosas no son posibles ya que el banco no me concede facilidades.
El tema es que yo creo que el no puede reclamarme nada, ya que así lo firmo en el contrato, yo tengo intención de sacarlo también de la vivienda , pero aun tengo que esperar ya que el precio de la hipoteca sigue siendo elevado y aun no encuentro facilidades en el banco que me permitan quedarme la responsabilidad yo sola.
¿Qué opciones tengo? despues de tanto tiempo me parece injusto que ahora me obligue a hacer una serie de gestiones que me van a producir un gasto el cual no puedo asumir y que encima el, siga saliendose de rositas sin pagar nada.