이직한지 1년정도 됐는데 너무 안맞네요..

중견기업에서 10년 안되게 근무하고 최근 작은회사로 이직한지 일년 정도 된 30대 후반입니다. 전직장에서 나름의 인정 받으면서 회사 다니고 있다가 새롭게 일을 더 하고 싶고 연봉도 올리려고 이직을 했습니다. 그래도 초반엔 재밌게 일을 했지만 전 회사 대비 특성상 체계가 없고 일이 몰리는 경우가 너무 많아졌고 최근엔 번아웃처럼 아무것도 하기 싫어졌습니다. 사실 번아웃이 온 큰 이유가 업무보다 사람이 잘 안맞는거 같네요. 자세하게 쓸 수는 없지만 사무실에 들어가는 순간 숨이 멎는것 처럼 답답하고 힘이 듭니다. 나이도 있고 가정도 있는데 정해진 다음 직장 없이 퇴사하는건 너무 무모한 생각일까요?? 혹시 저같은 분 있으신가요??