男＝痴漢、だから痴漢防止のために設置、というロジックからきた女性専用というのが問題なんでしょう。
痴漢防止ではありません、ビジネス上の優遇サービスです、って言ってくれれば何の問題もないのでは？