이혼한 전남편 회사와 가까운 직장

1월에 퇴사하고 이직준비중입니다 이직과 함께 직무변환을 하려고하다보니 면접은 여러곳 봤지만 겨우 한곳에서 합격되었습니다. 문제는 이혼한 전남편 회사와 가까운 곳에 위치해있어요 골목 끝과 끝이라서 걸어서 5분 거리에요 면접 보러갈때도 알고 갔지만 면접 연습한다는 마음으로 가볍게 간 곳이였는데 막상 면접을 보니 회사는 마음에 들었습니다. 전남편의 외도로 결혼 2년 끝에 이혼했고 시엄마라는 사람한테는 남편 간수 제대로 못해서 그렇다, 남자는 집 문밖을 나서면 내 남자 아니다 라는 소릴 듣고 저희 부모님은 시엄마로부터 딸가진 부모는 죄인이네 어쩌네 소릴 들었어요 사과한마디없고 오히려 적반하장으로 나오면서 안좋게 끝났어요 한동안은 매일 울면서 지내고 아직도 그때의 기억이 트라우마처럼 떠올라요 이직을 골라갈 수도 없고 한군데 붙은 곳이라고는 살면서 그림자도 보고싶지않은 그 인간 회사 근처라는 현실이 너무 싫네요ㅜㅜ 쓴 말이라도 좋으니 인생선배님들 현실적인 조언부탁드립니다..그냥 무시하고 회사 다니는게 맞을까요?