사무직에서 물류 현장직

안녕하세요. 현재 사무직으로 3년정도 근무하고 있는데, 계속 물류센터로 돌아가고 싶습니다. 취준생때 1년반정도 물류센터 아르바이트를 했었는데, 사실 그때만큼 마음이 편했던적이 없는것 같아요. 많은 아르바이트를 했었지만 돌아가고 싶다는 생각이 드는건 물류센터밖에 없는걸보면요.. 물론 책임자가 아니라, 단순 아르바이트여서 그랬을 순 있고, 그때 어울렸던 사람들이 좋아서일수도 있겠네요..그때도 고민이 많거나 우울할때면 출근을 하곤했었거든요.. 그런데 하고싶다고 해버리자니 나이도 30대가 됐고, 지금 하는 업무가 물류와는 전혀 다른 분야라 혹시 나중에 힘에 부쳐 다시 사무직이 하고 싶어졌을 때 돌아오기 어려울 것 같아 용기가 나질 않습니다. 현재에 지쳐 과거가 미화된걸까요...이 상황에도 하고 싶으면 시도 해보는게 맞는건지 잘 모르겠습니다..ㅠ