안녕하세요? 저는 규모가 어느 정도 있는 스타트업에서 데이터 엔지니어로 근무하고 있는 사람입니다. 소속은 BI(Business Intelligence) 담당 조직에 있고, 실질적인 업무는 데이터 ETL(Extract, Transform, Load)과 관련된 대부분의 업무를 처리하고 있습니다. 회사에 계시는 분석가 분들이 편하게 데이터 분석하실 수 있도록 환경을 구축하거나 시스템을 운영하는 일을 혼자서 맡아하고 있어요. 최근에 저희 회사 조직 구조를 변경하려고 동료분들과 다양하게 논의 중인데 데이터 엔지니어는 어떤 역할을 해야하는가에 대한 고민이 많아지고 있습니다. 조금 찾아보니 회사마다 데이터 엔지니어에게 기대하는 요구 조건이 다르더라고요. "분석가분들은 데이터 엔지니어에게 어떤 역할을 해주길 바라시나요?" 다양한 의견 알려주시면 많은 도움이 될 것 같습니다. 간략하게 저희 회사 데이터 인프라를 정리한 그림도 첨부합니다. 답변해주실 분들께 미리 감사드립니다.
데이터분석
분석가가 바라는 데이터 엔지니어의 역할은?
21년 08월 20일 | 조회수 849
소
소소
댓글 7개
공감순
최신순
오
오미자참새
21년 08월 28일
저랑 같은 상황이네요.. 저도 이질문을 저희 회사 분석가에 던졌는데 아직도 확실한 답변 못받았네요 ㅎㅎ
질문이 있는데 MWAA 는 어느리젼 사용하시나요?
저랑 같은 상황이네요.. 저도 이질문을 저희 회사 분석가에 던졌는데 아직도 확실한 답변 못받았네요 ㅎㅎ
질문이 있는데 MWAA 는 어느리젼 사용하시나요?
답글 쓰기
1
소
소소
작성자
21년 08월 31일
안녕하세요? 댓글 감사드립니다. 답변이 늦었네요.
같은 팀 분석하시는 동료들과 논의해보았는데 '쉬운 언어(SQL, python)로 빠르게 데이터를 조회, 가공하고 그 결과를 수월하게 공유할 수 있는 환경을 제공해주는 것' 정도로 결론지어지는 것 같아요.
사실 질문해주신 MWAA는 도쿄 리젼에서 테스트해보았는데 저희 운용 형태와 맞지 않아서 EC2에 설치형으로 airflow를 설치해서 사용하고 있습니다.
안녕하세요? 댓글 감사드립니다. 답변이 늦었네요.
같은 팀 분석하시는 동료들과 논의해보았는데 '쉬운 언어(SQL, python)로 빠르게 데이터를 조회, 가공하고 그 결과를 수월하게 공유할 수 있는 환경을 제공해주는 것' 정도로 결론지어지는 것 같아요.
사실 질문해주신 MWAA는 도쿄 리젼에서 테스트해보았는데 저희 운용 형태와 맞지 않아서 EC2에 설치형으로 airflow를 설치해서 사용하고 있습니다.
(수정됨)
0
지금 바로 리멤버 회원이 되어
모든 댓글을 확인하세요
모든 댓글을 확인하세요
리
리멤버
@멘션된 회사에서 재직했었음
19년 05월 28일
회사에서 풀지 못한 고민, 여기서
회사에서 업무를 하다가 풀지 못한 실무적인 어려움, 사업적인 도움이 필요한 적이 있으셨나요? <리멤버 커뮤니티>는 회원님과 같은 일을 하는 사람들과 이러한 고민을 해결할 수 있는 온라인 공간입니다.
회원 가입 하고 보다 쉽게 같은 일 하는 사람들과 소통하세요
회사에서 풀지 못한 고민, 여기서
회사에서 업무를 하다가 풀지 못한 실무적인 어려움, 사업적인 도움이 필요한 적이 있으셨나요? <리멤버 커뮤니티>는 회원님과 같은 일을 하는 사람들과 이러한 고민을 해결할 수 있는 온라인 공간입니다.
회원 가입 하고 보다 쉽게 같은 일 하는 사람들과 소통하세요
답글 쓰기
0
리
리멤버
@멘션된 회사에서 재직했었음
19년 05월 28일
일하는 사람과 기회를 연결하여 성공으로 이끈다
일하는 사람과 기회를 연결하여 성공으로 이끈다
답글 쓰기
0
추천글