과장님한테 우무사 당했는데 너무 당황스럽습니다..

안녕하세요? 작은 중소 다니고 있는 20대 후반입니다. 제가 너무 당황스러워서 대처를 잘 못한거 같은데 조언 좀 부탁드립니다. 과장님과 둘이서 저녁을 3번 먹었는데 이거에 대해 뭔가 의미 부여를 하신 것 같아요. 갑자기 카톡으로 우리 무슨 사이야? 를 시전하셨습니다.. 그런데 아무리 둘이서 밥을 먹었다고 해도 이성적인? 두근두근한 분위기는 단 한번도 없었습니다. 제 목숨을 걸고요.. 1. 평일에 야근 하다가 과장님이 저녁 먹자고 하셔서 회사 앞에 감자탕집을 갔었고요. 같이 야근하던 대리가 안 먹는다고 해서 둘이 간거였습니다. 2. 과장님이 업무적으로 도와주신게 있어서 너무 죄송하고 감사해서 보은의 의미로 육개장을 사드린적이 있어요. 3. 과장님이 제게 아주아주 사소한 업무를 부탁하신 적 있는데 , 감사의 의미로 밥 사주신다길래 거절했지만 계속 먹자고 하셔서 짜글이 같은걸 먹으러 갔었습니다. 메뉴 보면 아시겠지만 그냥 흔히 직장인들이 끼니 때우는.. 분위기라고는 1도 없는 그냥 식사였어요. 제가 리액션이 좋은 편이라 과장님 아재 개그에 적당히 웃어주고 업무 얘기 잘 받아준게 다입니다. 그러다가 며칠전 부서 회식이 있었고 저는 병원 예약 때문에 못 갔는데요.. 새벽에 과장님께 카톡이 왔습니다. ㅇㅇ씨 자요? 요즘 우리 밖에서 자주 보네 ㅎㅎ 덕분에 요즘 힘이 나. 근데 우리 사이가 뭐라고 생각해? 동료 사이에 단둘이 밥도 먹고 그러니까 나는 좀 헷갈리네. 이런 톡이 와서 진심 소름 돋아서 소리 지를 뻔했습니다. 밥은 다른 사람들이랑 더 자주 먹는데 왜 저한테만 이런 의미부여를 하시는 걸까요..ㅠㅠ 당황해서 일단 과장님 많이 취하셨어요? 당연히 둘도 없이 든든한 상사시죠~ 안녕히 주무시고 내일 뵈어요! 하고 숙취 해소제 하나 보내드렸습니다.. 근데 이걸 긍정적인 신호로 받아들이셨는지 제가 보낸 숙취해소제 잘 먹었다고 챙겨줘서 감동이라고.. 엄청 고마워하시고 이전보다 밥먹자는 얘기를 더 자주하세요. 어떻게든 핑계를 대서 거절하고 있기는 한데.. 아무래도 제 직속 상사시니까 조심스러워요. 정색했다고 삐져서 업무로 트집 잡거나 불이익을 주실까봐요. 현명하게 대처하려면 어떻게 해야 할까요? 조언 부탁드립니다.