They might notice. Or worse, if you say "woman," people on the other end of the table think you're asking for special treatment, or complaining.
Ils pourraient vous remarquer. Ou pire encore, si vous dites « femme », les gens de l’autre côté de la table pensent que vous demandez une faveur,