안녕하세요.
지난 시간에 스토리지 유형별 장단점을 알아보면서 기존 스토리지의 단점을 보완한 스토리지가 있다고 소개 드린다 말씀드렸었죠.
바로 요즘 너무나도 인기가 많은 HPE의 Qumulo 스토리지입니다.
지난 포스팅 참고하세요.
HPE Qumulo가 인기가 많아지는 이유? 데이터 폭증과 기존 파일 스토리지 한계!
- 향후 스토리지 시장은 2025년까지 약 10배 이상 급격하게 성장할 것으로 분석하고 있습니다.
- 데이터가 급증하는 이유는 사진, 고화질 영상, 의료 영상파일, 자율주행차 데이터, IoT 기반의 센싱 데이터 등 대부분이 비정형 데이터입니다.
- 하지만 지금 사용 되고 있는 File Storage의 구조는 2005년 이전에 만들어 졌기 때문에 현재처럼 폭발적인 Data의 증가를 감당 할 수 없습니다.
HPE Qumulo Storage는?
기존의 파일 시스템의 문제를 해결해
진정한 Scale-Out 아키텍처를 가진 NAS로
용량과 성능의 무제한 선형 확장을 제공하며,
확장할수록 그 진가를 발휘하는 스토리지입니다.
HPE Qumulo는 3가지 형태의 기존 스토리지의 단점을 극복하고 장점을 결합한 차세대 Scale-Out 스토리지 입니다.
분산파일 시스템과 오브젝트 스토리지 분야에서 리더제품으로 인정!
2016년도에 최초로 매직쿼트런트에 이름을 올린 후 2년만에 가트너 매직쿼드런트 리더그룹으로 수직 상승하였습니다.
• Gartner’s peer insight 4.9점 1등 (D사 4.3점, N사 4.6점)
• Gartner’s peer insight 100% 제품 추천 제품 (D사 72%, N사 80%)
HPE Qumulo Storage 파일 시스템의 특장점은? S. P. A. C. E !
Scale
스케일아웃 기반으로 1000대 노드까지 확장을 통해 용량과 성능의 선형적인 증가
온프라미스와 클라우드 환경에서 수 백 Petabyte & 수조 개 단위의 파일을 효과적으로 운영할 수 있으며 노트증설 시 성능과 용량이 선형적으로 증가하는 스케일아웃 파일 스토리지입니다.
온프라미스/클라우드 환경의 Petabyte Scale에 적합한 아키텍쳐
Limitations
• SMB Directory Name : 260 char.
• NFS Directory Name : 32,760 char.
• File Name : 255 (protocol limited) char.
• Files in a Directory : 4.25 billion
• File Size : 9 Exabyte
• Number of Files : 18 quintillion (1018)
Performance
파일의 크기와 수량, 클라이언트 수와 관계 없이 일정한 고성능 보장
모든 IO는 SSD에서 선처리 (하이브리드모델)
Flash-first architecture를 지원하는 유일한 파일 스토리지입니다. 현존하는 파일 스토리지 중에서 가장 작은 4K 블록 사이즈를 기반으로 성능과 공간을 자유자재로 Control 가능하며, 모든 파일 타입을 지원합니다. 또한, SSD에서 모든 IO를 처리하므로 Hybrid이지만 AFA급 성능을 발휘하는 스토리지입니다.
AI 기반의 인텔리전트 프로모션 캐시 알고리즘을 통해 성능을 개선합니다. 혁신적인 캐시 프리패칭 기술을 통해 높은 히트율을 유지합니다.
Qumulo File Fabric software
• HDD에서 SSD로의 Intelligent Promotion
• 시간이 지날 수록 Latency가 점점 낮아짐
• Sequential Access : SSD 급 Read Performance (98% IO from SSD)
• 일반적인 NAS Storage에서 가장 취약한 부분이었던 큰 비정형 file에도 강점을 가짐
Tree walk가 없는 분산 파일 시스템 기반의 비 계층 구조 파일 스토리지로 전체 클러스터에서 단일 Name Space를 사용합니다.
클라이언트 수가 많아지더라도 성능에 전혀 영향을 받지 않는 파일 스토리지입니다.
Analytics
외부 서버 없이 Storage 단위에서의 직관적이고 세분화된 실시간 분석 및 병목 감시 가능
• Understanding Your Performance (Dashboard)
- 한눈에 Cluster 상태가 파악되는 직관적인 Dashboard
• 최신 정보로 갱신 되는 지능적인 분석과 관리 기능
- Capacity 분석과 변동 Trend 파악
• 최신 정보로 갱신 되는 지능적인 분석과 관리 기능
- Cluster 성능 (Resource 소모) 분석과 Client 별 성능분석
• 최신 정보로 갱신 되는 지능적인 분석과 관리 기능
- 대역폭 분산 현황과 Directory 별 할당 제한 (Quota) 상태
• 최신 정보로 갱신 되는 지능적인 분석과 관리 기능
- Snapshot 상태와 Replication 상태 분석
Cost Efficient
100% Erasure Coding으로 성능 하락 없는 용량 효율성 보장
다양한 파일 사이즈에 대한 Write 테스트 결과로 파일 크기에 관계 없이 Qumulo 스토리지는 타 경쟁모델 대비 효율적으로 공간을 사용합니다.
• 경쟁 모델 보다 가용 공간 확보에 유리
- 1PB 할당 시 Qumulo는 84% 가용 용량을 제공하지만 경쟁사는 최대 67%, 최소 25%만의 가용 공간을 제공합니다.
Easy to Use
직관적인 UI 및 분석 기능을 통해 누구나 별도 교육 없이 손쉽게 운영 가능
Enterprise에 적합한 직관적이고 새로운 UI 및 API, SLACK Tool을 통한 업계 최고의 경험치를 가진 전문가의 직접적인 지원
• REST-API/Command Line Interface
Qumulo REST-API
- CLI/API Tool제공
- GUI와 100% 같은 기능을 제공
- Tab에서 모든 기능의 REST-API 예문 및 Syntax 조회
• Qumulo 유지보수 서비스 특징
Qumulo 유지보수 서비스 특징
- 구매 즉시 고객사별 Private Channel 생성
- 개별화되고 즉각적인 피드백을 위한 전문가 채널
- No Tiers: L1, L2, L3 등급이 없으며 고객이 원하는 담당자에게 직접 컨택이 가능
- 고객사별 히스토리를 잘 아는 고급 개발자/엔지니어가 24X7 장애 관련 지원
대표 적용 업무는?
Qumulo가 최적의 성능을 보이는 서비스입니다.
HPE Qumulo Storage 실제 적용 사례
C연구소 - Next-Generation Sequencing (NGS)
• 더 빠르고, 손쉬운 시퀀싱에 대한 요구 사항이 많아짐
• 기존 스토리지는 시퀀서를 통해 추출한 매우 작고 많은 파일에 적합하지 않음 (크기 1KB – 샘플당 2-5TB)
• 시퀀서를 통해서 추출되는 연간 10억개의 파일과 1-2PB 크기의 데이터를 효율적으로 저장, 보관해야 함
• HPE-180 x 24ea (용량 2.4PB)
• 멜라녹스 40G 스위치 x 4
• 시퀀싱을 하는데 하루가 걸리며 비용은 약 1,000불 수준으로 낮춤
• 작은 파일이 많음에도 기존 대비 저장 공간 60% 이상 절약
• 실시간 데이터 거버넌스가 가능
P사 : Rendering & VFX
• 랜더링 데이터를 빠르게 저장하고 공유할 수 있는 시스템이 필요 했음
• 여러 명이 동시 접속하여 편집작업시 성능이 떨어지는 이슈
• 데이터 용량이 많아지면서 현재 관리 툴로는 성능, 데이터 관리가 안됨
• 총 약 2.8PB
• Hybrid : C-168T X 16
• All-Flash : P-23T X 2
• Archive : K-168T X 10
• 동시 접속자 수가 많더라도 성능 저하가 없으며 락인을 통해 데이터의 정합성이 유지
• 파일 개수와 상관없이 매우 빠르고 즉각적인 인터페이스 환경 제공
• Qumulo 저장메카니즘을 통한 기존 시스템 대비 30% 용량을 제공
H자동차 : Advanced Driver Assistance Systems
• 자율주행차량은 현재 자동차 업계에서 가장 뜨거운 이슈
• 테스트 차량에서 생성되는 Telemetry Data는 30TB/day, 10대 운용 시 200일이면 60PB
• 사용 중인 N사의 Scale-up Storage는 비싸고, 집중화 되지 못하여 관리가 어려웠으며 Scale-up을 할수록 상황이 더 악화
• 고객사에서는 처음 D사의 스토리지를 추천 하였으나, 북미 법인은 Qumulo만의 혁신적인 장점 때문에 도입 결정
• Qumulo x 6 node
• 600TB Usable Capacity
• 크고 민감한 Data에 대한 쉬운 유지/운영
• Global하게 확대되는 R&D 센터에도 유연한 대응이 가능한 쉬운 Storage Scale-up/out
• Qumulo의 Real-time Analytics로 Cluster 내부의 현황을 아주 쉽게 Monitoring하게 됨
• Qumulo Care의 Proactive Monitoring으로 Service 관점에서도 큰 장점을 가짐
미국 고속도로 안전보험협회 : Corporate Video
• 충돌 테스트 시 저장되는 하나의 비디오는 300GB 이상으로 대용량 데이터를 빠르게 저장 해야하며 보정 작업 수반 (고성능 필요)
• 여러 센서로부터 생성되는 다수의 Dummy 파일을 저장 필요
• 한번의 테스트로 500GB 이상의 데이터 생성
• 초당 600MB/s 느린 스토리지 교체 필요
• 스토리지 확장의 어려움 및 한계에 항상 직면
• 증설에 따라 용량과 성능 향상되는 SDS 형태의 스토리지 요구
• Snapshot을 통해 편집 데이터 보호
• Quota를 통한 용량 제한 필요
• Qumulo Node x 6ea
• Usable 800TB
• 스토리지 Bandwidth 향상
• 600MB/s -> 3GB/s로 5배 향상
• 파일/디렉토리에 대한 성능이 분석이 가능해져 관리가 쉬워지고 매우 큰 만족
• Quota 가능해져 용량 관리가 용이
• Node 증설에 따라 성능/용량이 선형적으로 향상
• 비디오 보정 시 Snapshot 활용하여 원본 데이터 복제 불필요
제품 라인업
HPE Qumulo 스토리지는 국내유일 공식 인증된 동국시스템즈와 함께!
문의 사항 있으시면 언제든지 연락 주세요!
안녕하세요.
지난 시간에 스토리지 유형별 장단점을 알아보면서 기존 스토리지의 단점을 보완한 스토리지가 있다고 소개 드린다 말씀드렸었죠.
바로 요즘 너무나도 인기가 많은 HPE의 Qumulo 스토리지입니다.
지난 포스팅 참고하세요.
HPE Qumulo가 인기가 많아지는 이유? 데이터 폭증과 기존 파일 스토리지 한계!
HPE Qumulo Storage는?
기존의 파일 시스템의 문제를 해결해
진정한 Scale-Out 아키텍처를 가진 NAS로
용량과 성능의 무제한 선형 확장을 제공하며,
확장할수록 그 진가를 발휘하는 스토리지입니다.
HPE Qumulo는 3가지 형태의 기존 스토리지의 단점을 극복하고 장점을 결합한 차세대 Scale-Out 스토리지 입니다.
분산파일 시스템과 오브젝트 스토리지 분야에서 리더제품으로 인정!
2016년도에 최초로 매직쿼트런트에 이름을 올린 후 2년만에 가트너 매직쿼드런트 리더그룹으로 수직 상승하였습니다.
• Gartner’s peer insight 4.9점 1등 (D사 4.3점, N사 4.6점)
• Gartner’s peer insight 100% 제품 추천 제품 (D사 72%, N사 80%)
HPE Qumulo Storage 파일 시스템의 특장점은? S. P. A. C. E !
Scale
스케일아웃 기반으로 1000대 노드까지 확장을 통해 용량과 성능의 선형적인 증가
온프라미스와 클라우드 환경에서 수 백 Petabyte & 수조 개 단위의 파일을 효과적으로 운영할 수 있으며 노트증설 시 성능과 용량이 선형적으로 증가하는 스케일아웃 파일 스토리지입니다.
온프라미스/클라우드 환경의 Petabyte Scale에 적합한 아키텍쳐
Limitations
• SMB Directory Name : 260 char.
• NFS Directory Name : 32,760 char.
• File Name : 255 (protocol limited) char.
• Files in a Directory : 4.25 billion
• File Size : 9 Exabyte
• Number of Files : 18 quintillion (1018)
파일의 크기와 수량, 클라이언트 수와 관계 없이 일정한 고성능 보장
모든 IO는 SSD에서 선처리 (하이브리드모델)
Flash-first architecture를 지원하는 유일한 파일 스토리지입니다. 현존하는 파일 스토리지 중에서 가장 작은 4K 블록 사이즈를 기반으로 성능과 공간을 자유자재로 Control 가능하며, 모든 파일 타입을 지원합니다. 또한, SSD에서 모든 IO를 처리하므로 Hybrid이지만 AFA급 성능을 발휘하는 스토리지입니다.
AI 기반의 인텔리전트 프로모션 캐시 알고리즘을 통해 성능을 개선합니다. 혁신적인 캐시 프리패칭 기술을 통해 높은 히트율을 유지합니다.
Qumulo File Fabric software
• HDD에서 SSD로의 Intelligent Promotion
• 시간이 지날 수록 Latency가 점점 낮아짐
• Sequential Access : SSD 급 Read Performance (98% IO from SSD)
• 일반적인 NAS Storage에서 가장 취약한 부분이었던 큰 비정형 file에도 강점을 가짐
Tree walk가 없는 분산 파일 시스템 기반의 비 계층 구조 파일 스토리지로 전체 클러스터에서 단일 Name Space를 사용합니다.
클라이언트 수가 많아지더라도 성능에 전혀 영향을 받지 않는 파일 스토리지입니다.
Analytics
외부 서버 없이 Storage 단위에서의 직관적이고 세분화된 실시간 분석 및 병목 감시 가능
• Understanding Your Performance (Dashboard)
- 한눈에 Cluster 상태가 파악되는 직관적인 Dashboard
• 최신 정보로 갱신 되는 지능적인 분석과 관리 기능
- Capacity 분석과 변동 Trend 파악
• 최신 정보로 갱신 되는 지능적인 분석과 관리 기능
- Cluster 성능 (Resource 소모) 분석과 Client 별 성능분석
• 최신 정보로 갱신 되는 지능적인 분석과 관리 기능
- 대역폭 분산 현황과 Directory 별 할당 제한 (Quota) 상태
• 최신 정보로 갱신 되는 지능적인 분석과 관리 기능
- Snapshot 상태와 Replication 상태 분석
Cost Efficient
100% Erasure Coding으로 성능 하락 없는 용량 효율성 보장
다양한 파일 사이즈에 대한 Write 테스트 결과로 파일 크기에 관계 없이 Qumulo 스토리지는 타 경쟁모델 대비 효율적으로 공간을 사용합니다.
• 경쟁 모델 보다 가용 공간 확보에 유리
- 1PB 할당 시 Qumulo는 84% 가용 용량을 제공하지만 경쟁사는 최대 67%, 최소 25%만의 가용 공간을 제공합니다.
Easy to Use
직관적인 UI 및 분석 기능을 통해 누구나 별도 교육 없이 손쉽게 운영 가능
Enterprise에 적합한 직관적이고 새로운 UI 및 API, SLACK Tool을 통한 업계 최고의 경험치를 가진 전문가의 직접적인 지원
• REST-API/Command Line Interface
Qumulo REST-API
- CLI/API Tool제공
- GUI와 100% 같은 기능을 제공
- Tab에서 모든 기능의 REST-API 예문 및 Syntax 조회
• Qumulo 유지보수 서비스 특징
Qumulo 유지보수 서비스 특징
- 구매 즉시 고객사별 Private Channel 생성
- 개별화되고 즉각적인 피드백을 위한 전문가 채널
- No Tiers: L1, L2, L3 등급이 없으며 고객이 원하는 담당자에게 직접 컨택이 가능
- 고객사별 히스토리를 잘 아는 고급 개발자/엔지니어가 24X7 장애 관련 지원
대표 적용 업무는?
Qumulo가 최적의 성능을 보이는 서비스입니다.
HPE Qumulo Storage 실제 적용 사례
C연구소 - Next-Generation Sequencing (NGS)
• 더 빠르고, 손쉬운 시퀀싱에 대한 요구 사항이 많아짐
• 기존 스토리지는 시퀀서를 통해 추출한 매우 작고 많은 파일에 적합하지 않음 (크기 1KB – 샘플당 2-5TB)
• 시퀀서를 통해서 추출되는 연간 10억개의 파일과 1-2PB 크기의 데이터를 효율적으로 저장, 보관해야 함
• HPE-180 x 24ea (용량 2.4PB)
• 멜라녹스 40G 스위치 x 4
• 시퀀싱을 하는데 하루가 걸리며 비용은 약 1,000불 수준으로 낮춤
• 작은 파일이 많음에도 기존 대비 저장 공간 60% 이상 절약
• 실시간 데이터 거버넌스가 가능
P사 : Rendering & VFX
• 랜더링 데이터를 빠르게 저장하고 공유할 수 있는 시스템이 필요 했음
• 여러 명이 동시 접속하여 편집작업시 성능이 떨어지는 이슈
• 데이터 용량이 많아지면서 현재 관리 툴로는 성능, 데이터 관리가 안됨
• 총 약 2.8PB
• Hybrid : C-168T X 16
• All-Flash : P-23T X 2
• Archive : K-168T X 10
• 동시 접속자 수가 많더라도 성능 저하가 없으며 락인을 통해 데이터의 정합성이 유지
• 파일 개수와 상관없이 매우 빠르고 즉각적인 인터페이스 환경 제공
• Qumulo 저장메카니즘을 통한 기존 시스템 대비 30% 용량을 제공
H자동차 : Advanced Driver Assistance Systems
• 자율주행차량은 현재 자동차 업계에서 가장 뜨거운 이슈
• 테스트 차량에서 생성되는 Telemetry Data는 30TB/day, 10대 운용 시 200일이면 60PB
• 사용 중인 N사의 Scale-up Storage는 비싸고, 집중화 되지 못하여 관리가 어려웠으며 Scale-up을 할수록 상황이 더 악화
• 고객사에서는 처음 D사의 스토리지를 추천 하였으나, 북미 법인은 Qumulo만의 혁신적인 장점 때문에 도입 결정
• Qumulo x 6 node
• 600TB Usable Capacity
• 크고 민감한 Data에 대한 쉬운 유지/운영
• Global하게 확대되는 R&D 센터에도 유연한 대응이 가능한 쉬운 Storage Scale-up/out
• Qumulo의 Real-time Analytics로 Cluster 내부의 현황을 아주 쉽게 Monitoring하게 됨
• Qumulo Care의 Proactive Monitoring으로 Service 관점에서도 큰 장점을 가짐
미국 고속도로 안전보험협회 : Corporate Video
• 충돌 테스트 시 저장되는 하나의 비디오는 300GB 이상으로 대용량 데이터를 빠르게 저장 해야하며 보정 작업 수반 (고성능 필요)
• 여러 센서로부터 생성되는 다수의 Dummy 파일을 저장 필요
• 한번의 테스트로 500GB 이상의 데이터 생성
• 초당 600MB/s 느린 스토리지 교체 필요
• 스토리지 확장의 어려움 및 한계에 항상 직면
• 증설에 따라 용량과 성능 향상되는 SDS 형태의 스토리지 요구
• Snapshot을 통해 편집 데이터 보호
• Quota를 통한 용량 제한 필요
• Qumulo Node x 6ea
• Usable 800TB
• 스토리지 Bandwidth 향상
• 600MB/s -> 3GB/s로 5배 향상
• 파일/디렉토리에 대한 성능이 분석이 가능해져 관리가 쉬워지고 매우 큰 만족
• Quota 가능해져 용량 관리가 용이
• Node 증설에 따라 성능/용량이 선형적으로 향상
• 비디오 보정 시 Snapshot 활용하여 원본 데이터 복제 불필요
제품 라인업
HPE Qumulo 스토리지는 국내유일 공식 인증된 동국시스템즈와 함께!
문의 사항 있으시면 언제든지 연락 주세요!