딥러닝 학습용 데이터가 수백기가가 되면 관리가 어려워지는데요. 저희는 각 서버에 똑같은 데이터를 두다가 관리가 어려워서 네트워크 스토리지 도입을 생각하고 있습니다. 근데 이게 속도 측면에서 어떨진 아직 검토중이고요. 다른 기업에서는 여러 프로젝트가 각각 다른 데이터를 쓸때 어떻기 데이터를 관리하나요?
AI/빅데이터
학습용 데이터 관리 어떻게 하시나요
20년 08월 28일 | 조회수 241
주
주소
댓글 2개
공감순
최신순
e
elkain
20년 08월 28일
minio라는 클라우드 네트워크 스토리지를 내부 네트워크에 구축해서 거기에 데이터를 올려 공유 및 관리하고 있습니다. 수십기가를 올리거나 받을 때는 몇십분정도 소요되고 작은 용량 정도는 빠르게 처리됩니다.
minio라는 클라우드 네트워크 스토리지를 내부 네트워크에 구축해서 거기에 데이터를 올려 공유 및 관리하고 있습니다. 수십기가를 올리거나 받을 때는 몇십분정도 소요되고 작은 용량 정도는 빠르게 처리됩니다.
(수정됨)
답글 쓰기
1
지금 바로 리멤버 회원이 되어
모든 댓글을 확인하세요
모든 댓글을 확인하세요
리
리멤버
@멘션된 회사에서 재직했었음
19년 05월 28일
회사에서 풀지 못한 고민, 여기서
회사에서 업무를 하다가 풀지 못한 실무적인 어려움, 사업적인 도움이 필요한 적이 있으셨나요? <리멤버 커뮤니티>는 회원님과 같은 일을 하는 사람들과 이러한 고민을 해결할 수 있는 온라인 공간입니다.
회원 가입 하고 보다 쉽게 같은 일 하는 사람들과 소통하세요
회사에서 풀지 못한 고민, 여기서
회사에서 업무를 하다가 풀지 못한 실무적인 어려움, 사업적인 도움이 필요한 적이 있으셨나요? <리멤버 커뮤니티>는 회원님과 같은 일을 하는 사람들과 이러한 고민을 해결할 수 있는 온라인 공간입니다.
회원 가입 하고 보다 쉽게 같은 일 하는 사람들과 소통하세요
답글 쓰기
0
리
리멤버
@멘션된 회사에서 재직했었음
19년 05월 28일
일하는 사람과 기회를 연결하여 성공으로 이끈다
일하는 사람과 기회를 연결하여 성공으로 이끈다
답글 쓰기
0
추천글
