데이터 분석을 위한 인프라는 어떻게 구성이 되어야 하나

데이터품질과 데이터베이스 관리를 해본 경험에 비추자면, 업무시스템에 맞게 최적의 데이터베이스 설계가 되는게 기본입니다. 즉 데이터분석 설계단계에서부터 ERD를 잘 만들고, 그걸 이행해서 데이터 적재를 하구요. 그런다음에야 데이터 활용이 쉬워집니다. 데이터의 설계가 중구 난방이면, 중복데이터와 여러 테이블에 관계를 다 끌어와서 데이터를 만들어야 하기도 하구요. 쉽지 않은 어려운 문제입니다. 처음부터 하는 프로젝트라면 데이터분석 설계 단계부터 나중에 어떻게 데이터를 활용할지를 고민해서 같이 설계한다면 가장 좋지 않을까 생각해봅니다. 잘 설계된 데이터베이스도 응용(AP)단의 프로그램 문제나 사용자 오류등의 문제로 데이터 정합성이 훼손될 가능성도 높은데 결국 이런 부분의 데이터품질 관리 시스템같은것을 운용하면서 정합성을 높이고 오류데이터를 줄여주고 발생율도 낮춰주는게 필요하기도 합니다. 이러한 데이터품질의 관리비용을 줄이기 위해서 역시 데이터베이스 설계 단계에서 제약조건과 관계설정등을 엄격히 해야 하구요.(근데 이런부분이 조금 이상에 가까워서 현실에서는 아주 힘듭니다.). 너무 길었네요.