화장실을 너무 자주 간다는 얘기를 들었습니다

안녕하세요. 최근에 회사에서 좀 당황스러운 일이 있었는데 제가 이상한 건지 판단이 안서서요....ㅠ 대표님께서 전 직원이 다 있는 회의 자리에서 화장실을 자주 가는 몇몇 사람들이 있던데 업무에 집중을 안하는 것 같다며 업무 능률 떨어지니까 좀 자제하라는 식으로 말씀하시더라구요. 근데 회의 중에 화장실 간다고 드나들거나 담배 피우러 자주 나가면 모를까 저희 회사엔 그런 사람도 없고 다들 본인 일 하다가 짧게 화장실 다녀오는 정돈데.. (회사 인원이 적은 편이라 자리 오래 비우면 티가 나요) 그 얘기를 듣고 나니까 주변 눈치도 보이고 저도 너무 자주 가나? 싶은 생각이 계속 듭니다 ㅜㅜ 몇 회 가는게 적당한 건지도 모르겠네요...ㅎ 생리현상이 맘대로 컨트롤이 되는 것도 아니라 일부러 참다보면 오히려 업무 집중이 안되는 느낌인데 무엇보다 이런거까지 신경쓰고 있으니 솔직히 현타가 옵니다. 이상하게 생각하는 제가 오히려 잘못된 걸까요??