¿Puedo negarme a cambiar de puesto si padezco lesiones?

Buenos días. Desde hace años, padezco lesiones crónicas que me impiden cargar pesos elevados o realizar esfuerzos importantes en mi entorno personal y laboral. Se habla de cambios en el trabajo que me llevarían a comprometer mi salud. Llegado el caso, si la empresa decide cambiarme a ese puesto, ¿cuál sería el procedimiento para no aceptarlo? ¿El día que ocurra debería mantenerme en mi puesto y, si ellos continúan en su empeño, poner una denuncia en la Inspección de trabajo? ¿Pueden apartarme del trabajo mientras se resuelve la denuncia? Estoy en Madrid, España.