האם מותר ללכת למכון כושר לנשים שיש בו מזכיר גבר?

שלום,
אני מנויה במכון כושר דתי לנשים בלבד, שגם כל השיעורים והמורות הן נשים כמובן,
אחד המזכירים שם גבר והקבלה מחוץ לחדר האימונים,
חשבתי שהוא נמצא רק בקבלה(זה מה שקורה בד"כ) ולכן עשיתי מנוי,
אבל היום הייתי בחדר האימון והוא נכנס כמה פעמים לצרכים טכניים לחדר האימון עצמו(בד"כ יש גם מזכירה שהיא זו שנכנסת, היום משום מה הוא היה שם לבד).
השאלה אם מותר להמשיך ללכת למכון שהוא נמצא,
כי בחדר כושר אני נמצאת עם מכנס (ארוך) וחולצה שרוול קצר,
או שאולי זה לצורך עבודתו אז מותר כמו מציל בים?