인생 선배들께 조언 구합니다.

인사노무 직무로 입사해서 4년 차 재직 중입니다. 근데 직무가 맞지 않아서 하루하루 버티는 느낌으로 회사를 다니고 있습니다. 노동조합이 있는 제조업 특성상 제가 상상하던 인사노무 업무와는 달리 현장 사람들과 집행부 그리고 대의원들을 많이 알아야만 업무를 원활하게 진행할 수 있습니다. 저는 그렇게 사람들 만나는 걸 좋아하지도 않고 즐기지도 않습니다. 사람들과 어울리기보다 혼자 조용히 있는걸 선호하고 정치질과도 거리가 먼 편입니다. 이러한 업무 환경 때문에 꽤나 많은 스트레스를 받고 있습니다. 그렇다 보니 자연스레 업무효율도 떨어지고 상사들과의 관계도 좋지 못합니다. 해결책을 찾기 위해 고민해봤지만 직무순환 제도라던지 사업장간 전환배치 등 직원들의 대한 인사 시스템이 전혀 없습니다. 이러한 사유로 이직까지 고려하고 있습니다. 아예 다른 회사에 신입으로 지원할 생각도 해보았지만 벌써 나이가 30대 초반이고 지금 받는 연봉 수준에서 중소기업으로 이직해서 제게 맞는 새로운 일을 찾아가자니 두려운 마음도 큽니다 앞으로 어떻게 하는게 좋을까요? 한참 남은 직장생활에 걱정과 두려움이 가득합니다.