職場で距離を置いて働くのは悪ですか？

あっ誤解されるといけないので、差別用語というより障害を持ってる方に対し失礼なので、普通はそのような例えはしないという意味です。