이거 제가 예민한건가요?

중견기업에 재직중인 20대 후반 여자입니다. 회사 생활을 하다보면 다양한 사람들을 접하게 되는데 HR업무를 하는 특성상 더 그렇기도 해요. 회사 내부 생활에선 큰 이슈가 없는데 팀 상사님이 얼마전부터 저녁자리에 자연스레 초대를 몇번 했는데 당연히 비즈니스적인 자리로 생각되었고 가끔 한두번 참석할때 몇번 뵙게됐던 분이 있습니다. 40대 중후반 타회사 대표 남자분인데, 자연스레 이런 저런 대화를 하다가 미혼이라는 걸 알게됐습니다. (여기까지 사실 아무런 특이점이 없었고 그냥 지나가는 얘기로 흘려듣고 저는 맛있게 식사를 했죠…) 근데 언제부턴가 상사분이 그 40대 대표분과 식사자리에 저를 자꾸 초대하려했고 사실상 칼퇴하고 싶지 퇴근하고나서까지 그런자리에 있기 싫어서 거절을 몇번했어요. 그러고 나서 한 이삼주 정도 시간이 지난것 같은데 오늘 저녁에 갑자기 모르는 번호로 전화가 와서 받았습니다. (처음 뵀을때 인사치레상 명함교환을 해서 그 대표님께서도 제 명함을 갖고계세요. 저는 그분 번호는 굳이 저장은 안한상태) 근데 자연스레 이런저런 얘기로 안부 물으시더니 저희 상사분께서 제가 골프를 잘 친다고 했다며, 같이 라운딩을 가자고 제안을 하시네요..? 저는 솔직히 뭔가 자꾸 저를 저 대표님과 연결하려는 분위기가 느껴져서 자연스레 피했는데, 오늘 이렇게 갑자기 전화까지해서; 골프 라운딩 대접하겠다며… 조만간 시간 맞춰서 같이 나가자고 하시네요. (전 배운지 얼마 안된터라 머리도 안올렸다고 그냥 간접적인 거절을 했는데, 연습하면서 느는거라고 나중에 거절하지말고 꼭 같이 나가자고 반강제? 약속을 정하시더라구요) 전 이 상황이 좀 불편하고, 사실 싫은데;; 제가 예민한거 아니죠? 뭐 제 또래를 자연스레 소개시켜주는 분위기도 아니고; (애초에 캐주얼한 자리도 아니었구요..)40대 중후반 분이랑 자꾸 엮으려는 그런분위기가 있는게 느껴져요. 매번 거절하기도 죄송한데 제가 예민한건가요? 어떻게 대처해야 할까요. 너무 불편합니다..