別に一緒に行っても良いんじゃないの？
特別なことではないでしょ。
友達と一緒にジムに行くくらいよくあることだし、あのジムは芸能人御用達みたいな感じだから、変に特別視する必要もないと思うけど。