Trabajo en un centro deportivo, ¿puedo apuntarme a otro gimnasio?

Hola: Soy de Madrid y trabajo en un centro deportivo como recepcionista.

Hace unos meses me apunté a otro gimnasio de la misma localidad que vivo, y ha llegado a oídos de mi jefa.

Pienso que es mi tiempo libre y mi vida, pero ella opina que da mala imagen a la empresa y me contó el caso de una persona a la que despidieron por apuntarse a otro gimnasio. Cito textualmente "No te lo puedo prohibir, pero das mala imagen a la empresa"


Quiero saber si estoy haciendo algo mal, hasta qué punto perjudica a la empresa que yo haga ejercicio en otro sitio.

Gracias