스토리지솔루션인 HPE Cray ClusterStor E1000은 병렬파일 시스템인 *Lustre가 내장되어 있습니다.
그렇기 때문에 AI, 고성능 데이터 분석 워크로드를 실행하는 Apollo 시스템의 대규모 클러스터 및 HPC Cray 슈퍼컴퓨터에 HPE Slingshot, InfiniBand HDR, 100/200 GbE 을 연결하는 데 이상적입니다!
✔ HPE Cray 슈퍼컴퓨터
엑사스케일 슈퍼컴퓨터는 컨버지드 모델링, 시뮬레이션, AI 및 분석 워크로드를 처리하기 위해 설계된 제품입니다.
다중 프로세서 아키텍처와 가속기 옵션을 지원하며, 차세대 블레이드 및 서버와의 상위 호환성에 맞춰 설계되었습니다.
따라서 대규모 과학 및 엔지니어링 응용 프로그램에 최적화되어 있습니다.
*러스터(Lustre)는 병렬 분산 파일 시스템으로서 주로 고성능 컴퓨팅의 대용량 파일 시스템으로 사용되고 있다. 러스터(Lustre)의 이름은 Linux와 cluster의 혼성어이다. 러스터는 GNU GPL 정책의 일환으로 개방되어 있으며 소규모 클러스터 시스템부터 대규모 클러스터 시스템용 고성능 파일 시스템이다. 높은 성능과 코드가 개방되었기 때문에 슈퍼컴퓨터에 자주 사용된다. 대한민국에서는 한국과학기술정보연구원과 대한민국 기상청이 러스터 파일 시스템 기반 스토리지를 사용하고 있다.
슈퍼컴퓨팅 TOP 500은 매년 업데이트되는 세계적인 슈퍼컴퓨터 순위에요. 이 순위는 슈퍼컴퓨터들의 성능에 기반하여 결정되고, 주로 연산 속도와 처리 능력을 측정하여 순위가 매겨집니다.
그리고 이 순위는 세계 각국의 연구소, 대학, 기업 등에서 운영되는 슈퍼컴퓨터들의 성능을 비교하고 평가하는데 사용되고, 전 세계 슈퍼컴퓨터 시스템의 성능과 발전 추세를 파악하는데 도움을 줍니다.
최근에는 더욱 슈퍼컴퓨터의 발전과 성능 향상에 대한 업계 및 연구 기관의 주목을 받으며, 다양한 분야에서 고성능 컴퓨팅을 활용하는데 중요한 지표로 사용되고 있어요.
이 TOP 500에 HPE가 구축한 슈퍼컴퓨터인 Frontier(프론티어) 가 당당히 1위를 차지하였습니다!!
특히 작년에 이은 2년 연속 최정상이라 큰 화제가 되었지요.
프론티어는 앞서 설명드린 HPE Cray 슈퍼컴퓨팅 기반이며, 실측 성능은 무려 1.194 EF(엑사플롭스)라고 합니다!
이는 1초에 110.2경번 연산이 가능한 수준이에요. (너무 높은 단위라 사실 감이 잘 안오긴 하네요. 😅)
마지막으로 TOP 500에서 확인할 수 있는 세계 슈퍼컴퓨터 5위까지의 순위표 보여드립니다.
TOP 500의 웹사이트를 방문하시면 전체 순위표를 확인하실 수 있습니다.
출처 : top500.org 사이트
완전히 관리되는 최초의 HPC 클라우드
하드웨어 뿐만 아니라 클라우드로 HPC를 도입할 수 있습니다.
바로 고성능 컴퓨팅용 HPE GreenLake 입니다!
이 HPC용 GreenLake를 통해 고객사는 간편하게 환경을 업그레이드하실 수 있어요.
서비스 기반의 GreenLake로 HPC를 도입하면 어떤 장점이 있는지, 설명드릴게요.
✅ HPE GreenLake 플랫폼은 워크로드 최적화 시스템을 제공합니다.
리소스를 신속하게 구현하고, 수요 발생 전에 용량을 늘릴 수 있습니다.
좀더 자세히 말씀드리자면, 고성능 컴퓨팅이 필요한 애플리케이션이 증가하고 있기에 IT 부서는 필요한 기술을 확보하고, HPC를 광범위하게 지원하며, 증가한 수요를 관리하는 데 어려움을 겪고 있는 고객들이 계실텐데요.
HPC 용 HPE GreenLake를 통해 조직은 간편하게 환경을 확장하고 셀프서비스로 사용자를 지원할 민첩성을 확보할 수 있습니다.
✅ 또한 HPE GreenLake만의 관리 플랫폼은 온프레미스 클라우드 서비스 소비 모델로 HPC 솔루션의 우수한 유연성, 확장성, 관리 기능을 제공합니다. 진입점이 낮아지고, GPU 옵션이 더 많으며, Slingshot 고속 네트워킹, HPE 병렬 스토리지가 적용된 2세대 클라우드 서비스로 AI, 기계 학습 및 추가 HPC 기술을 활용할 수도 있어요.
✅ 가장 큰 장점인 것은 비용 과금이 바로 사용량 기반이라는 것입니다.
사용하는 만큼만 지불하고, 실시간으로 비용과 사용량을 확인할 수 있습니다.
좀더 자세한 내용을 원하시면 아래와 같이 HPE 사이트와 디케이앤유 블로그 글을 확인해보세요!
지금 , IT에서 가장 핫한 트렌드는 무엇이라고 생각하나요?
바로 바로 챗GPT가 아닐까요? 연일 화제를 몰고 다니는 챗 GPT의 등장으로 인공지능 (AI)이 더욱더 뜨거워지고 있죠.
그리고 이 뜨거운 AI 트렌드 속에서 HPC에 대한 관심도 증가하고 있는데요.
왜 AI와 HPC가 같이 떠오르는지! 궁금하셨던 분들이 계실거라 생각합니다.
그래서 이번 글에서 이 두 개가 어떻게 연결되어 있는지,
그리고 HPE의 HPC 제품은 어떤 것이 있는지 간단하게 설명드리겠습니다. 😊
AI & HPC
위에서 말씀드렸다싶이, AI와 HPC는 현재 IT에서 가장 관심받는 분야인데요.
먼저 두가지 용어 설명을 해드릴게요.
AI는 Artificial Intelligence로 인공지능의 줄임말입니다.
컴퓨터 시스템이 인간의 지능과 유사한 작업을 수행할 수 있도록 하는 기술로, AI는 데이터를 학습하고 패턴을 인식하여 문제를 해결하거나 결정을 내릴 수 있는 능력을 갖추고 있어요.
HPC는 High-Performance Computing으로, 말 그대로 고성능 컴퓨팅이에요.
대규모 문제를 처리하고 해결하는 데 사용되는 컴퓨팅 기술입니다.
HPC 시스템은 다수의 컴퓨터 노드로 구성되어 병렬 처리를 수행하여, 고속 연산, 대용량 데이터 처리, 복잡한 모의실험 등에 적합하다고 해요. 그래서 과학, 공학, 경제 등 다양한 분야에서 연구 및 실무에 활용되며, 더 빠른 계산과 데이터 분석이 가능하고요.
좀 길다구요?
다시 요약하자면, HPC는 고성능 컴퓨팅을 통해 대용량 데이터 처리와 복잡한 연산을 신속하게 수행하는 기술입니다. 😊
AI ✖ HPC !!
이 두 기술은 상호 보완적으로 연결되어 기술의 발전과 다양한 분야에서 혁신을 이끌어 내고 있어요.
AI의 학습 및 작업 수행을 HPC, 고성능 컴퓨팅이 처리 속도를 크게 높여주기 때문이죠!
좀더 설명을 드리자면,
✅ AI는 데이터에 대한 학습과 추론을 수행하는데 많은 계산 리소스가 필요합니다.
수행할 수 있는 인프라가 중요해지는 거죠. 이를 위해 HPC가 활용되어 대량의 데이터 처리와 고속 연산을 지원합니다.
✅ 어떻게 지원하냐구요?
HPC는 병렬 컴퓨팅, 대용량 데이터 처리, 빠른 연산 등의 기능을 제공하기 때문에 AI 모델의 훈련과 추론 과정을 가속화하고 효율성을 향상시킬 수 있어요.
✅ 또한 HPC는 AI 모델의 학습과정까지 가속화하여 더 빠르고 정확한 예측을 가능하게 합니다.
✅ 이러한 상호작용으로 연결된 AI와 HPC는 의료, 금융, 자율 주행, 에너지 등 다양한 산업에서 혁신적인 솔루션과 서비스를 제공하게 됩니다.
한가지 더 말씀드리면,
GPT-3에 570GB 용량 사전학습 데이터를 처리할 때,
기존 클라우드 시스템으로는 356년이 걸렸지만 1엑사급 HPC로는 3.6일이면 된다고 합니다. 😮
HPC 써머리
그럼 HPC(고성능 컴퓨팅)의 특징을 IT 초보자 입장에서 설명을 해보겠습니다. 😊
1️⃣ 빠른 연산 속도
앞에서 계속 말씀드렸으니 이제 아실꺼라고 생각합니다~
HPC는 고속 연산을 위해 설계된 컴퓨팅 시스템입니다.
따라서 다른 일반적인 컴퓨터보다 훨씬 높은 처리 속도와 성능을 가지고 있습니다.
얼마나 빠르냐면.. 측정 속도의 단위조차 다르답니다. 혹시 플롭스(Flops)라고 들어보셨나요? 컴퓨터의 연산 속도를 나타내는 단위인데요. 일반 컴퓨터는 테라플롭스 단위로 측정이 되지만, HPC는 페타플롭스 단위로 성능을 측정한다고 합니다!
2️⃣ 대규모 데이터 처리
대량의 데이터를 효율적으로 처리할 수 있습니다.
대용량 데이터를 빠르게 읽고 쓸 수 있어서 대규모 데이터 처리 작업에 적합하고, 정확한 결과를 빠르게 얻을 수 있다는 점이죠. 이는 데이터베이스 관리, 과학 연구, 예측 분석 등 다양한 분야에서 중요합니다.
또한 연산을 작은 부분으로 나누어 여러 개의 프로세서에서 작업을 분할하여 동시에 처리합니다.
이걸 병렬 처리라고 하는데요, HPC의 이 병철 처리 능력으로 계산 작업을 더 빠르게 실행할 수 있고, 연산 속도를 크게 향상시킵니다.
3️⃣ 고성능 네트워크
HPC 시스템은 고성능 네트워크를 사용하여 다수의 컴퓨팅 자원 간에 빠른 데이터 통신을 가능하게 합니다.
이 부분은 다중 노드 간의 데이터 전송과 협업 작업에 필수적이에요.
4️⃣ 무궁무진한 가능성
HPC는 다양한 곳에서 사용됩니다.
앞에서도 말씀드렸다싶이, 다양한 산업 분야에서 활용됩니다.
예를 들어, 기상 예측을 통한 재난 대비, 신약 개발을 위한 분자 시뮬레이션, 금융 시장 데이터 분석 등에서 HPC의 높은 성능과 데이터 처리 능력이 중요한 역할하며, 최근에는 의료분야에서도 HPC를 적극적으로 활용하고 있다고 합니다.
다만 이처럼 무궁무진한 곳에 가능성이 있지만, HPC를 사용하긴 쉽진 않을 거에요.
설치할 공간도 필요하고, 이를 제대로 쓸수 있는 기술력과 인력도 필요하기 때문이에요!
이런 고민을 해결할 수 있는 제품이 있죠! 아래에서 HPE의 HPC 솔루션을 소개해드리겠습니다. 😊
HPC / AI 를 위한 최적의 HPE 제품
고성능 컴퓨팅에 대해 맥킨지는 CPU, GPU를 포함하는 고성능컴퓨팅(HPC)용 칩 시장 규모가 2030년 3500억달러로 2021년(2250억달러) 대비 55.5% 증가할 것으로 전망했다고 해요!
또한 가트너는 GPU 파운드리 시장이 2027년까지 연평균 21%, CPU는 19% 커질 것이란 조사 결과를 발표했습니다.
(실제로 최근 GPU 공급사인 NVIDIA의 주식이 폭등 했드랬죠..🤩)
그럼, 앞으로 지속적으로 수요가 높아질 HPE HPC 제품을 소개해드리겠습니다.
HPE Apollo
고성능 컴퓨팅 및 데이터 센터를 위한 서버 시리즈로, HPC 및 AI 워크 로드의 다양한 규모와 요구 사항에 맞는 유연성과 확장성을 제공합니다. 아울러 랙스케일 효율성을 기반으로 하기 때문에 고객에게 최적화된 컴퓨팅 솔루션을 제공할 수 있는 제품입니다.
특히 Apollo 6500 Gen10 plus는 모든 데이터 센터의 워크로드를 처리할 수 솔루션의 배포를 염두에 두고 설계한 제품이라, 뛰어난 메모리 대역폭, 처리량 및 데이터 통신을 활용하여 방대한 계산 능력을 제공합니다.
더불어 전력과 냉각 효율성도 업계 최고 수준이니, 그 어떤 제품보다 안정적인 운영이 가능하겠죠!
아래에 Apollo 제품 보여드릴게요. 자세한 내용이 궁금하시다면 링크를 통해 제품 상세 페이지로 들어가주세요~
HPE Apollo 2000 Gen 10 Plus
HPE Apollo 6500 Gen10 Plus
아폴로 더 알아보기
HPE Cray
HPE Cray는 스토리지 솔루션인 HPE Cray ClusterStor E1000와 슈퍼컴퓨터 HPE Cary 슈퍼컴퓨터 제품군으로 나뉩니다.
✔ HPE Cray ClusterStor E1000
스토리지솔루션인 HPE Cray ClusterStor E1000은 병렬파일 시스템인 *Lustre가 내장되어 있습니다.
그렇기 때문에 AI, 고성능 데이터 분석 워크로드를 실행하는 Apollo 시스템의 대규모 클러스터 및 HPC Cray 슈퍼컴퓨터에 HPE Slingshot, InfiniBand HDR, 100/200 GbE 을 연결하는 데 이상적입니다!
✔ HPE Cray 슈퍼컴퓨터
엑사스케일 슈퍼컴퓨터는 컨버지드 모델링, 시뮬레이션, AI 및 분석 워크로드를 처리하기 위해 설계된 제품입니다.
다중 프로세서 아키텍처와 가속기 옵션을 지원하며, 차세대 블레이드 및 서버와의 상위 호환성에 맞춰 설계되었습니다.
따라서 대규모 과학 및 엔지니어링 응용 프로그램에 최적화되어 있습니다.
*러스터(Lustre)는 병렬 분산 파일 시스템으로서 주로 고성능 컴퓨팅의 대용량 파일 시스템으로 사용되고 있다. 러스터(Lustre)의 이름은 Linux와 cluster의 혼성어이다. 러스터는 GNU GPL 정책의 일환으로 개방되어 있으며 소규모 클러스터 시스템부터 대규모 클러스터 시스템용 고성능 파일 시스템이다. 높은 성능과 코드가 개방되었기 때문에 슈퍼컴퓨터에 자주 사용된다. 대한민국에서는 한국과학기술정보연구원과 대한민국 기상청이 러스터 파일 시스템 기반 스토리지를 사용하고 있다.
출처 : 위키백과
HPE Cray ClusterStor E1000
크레이 클러스터스토어 더 알아보기
HPE Cray EX 슈퍼컴퓨터
크레이 슈퍼컴퓨터 더 알아보기
➕ 플러스
혹시 슈퍼컴퓨팅 “TOP 500” 을 들어보셨나요?
슈퍼컴퓨팅 TOP 500은 매년 업데이트되는 세계적인 슈퍼컴퓨터 순위에요. 이 순위는 슈퍼컴퓨터들의 성능에 기반하여 결정되고, 주로 연산 속도와 처리 능력을 측정하여 순위가 매겨집니다.
그리고 이 순위는 세계 각국의 연구소, 대학, 기업 등에서 운영되는 슈퍼컴퓨터들의 성능을 비교하고 평가하는데 사용되고, 전 세계 슈퍼컴퓨터 시스템의 성능과 발전 추세를 파악하는데 도움을 줍니다.
최근에는 더욱 슈퍼컴퓨터의 발전과 성능 향상에 대한 업계 및 연구 기관의 주목을 받으며, 다양한 분야에서 고성능 컴퓨팅을 활용하는데 중요한 지표로 사용되고 있어요.
이 TOP 500에 HPE가 구축한 슈퍼컴퓨터인 Frontier(프론티어) 가 당당히 1위를 차지하였습니다!!
특히 작년에 이은 2년 연속 최정상이라 큰 화제가 되었지요.
프론티어는 앞서 설명드린 HPE Cray 슈퍼컴퓨팅 기반이며, 실측 성능은 무려 1.194 EF(엑사플롭스)라고 합니다!
이는 1초에 110.2경번 연산이 가능한 수준이에요. (너무 높은 단위라 사실 감이 잘 안오긴 하네요. 😅)
마지막으로 TOP 500에서 확인할 수 있는 세계 슈퍼컴퓨터 5위까지의 순위표 보여드립니다.
TOP 500의 웹사이트를 방문하시면 전체 순위표를 확인하실 수 있습니다.
출처 : top500.org 사이트
완전히 관리되는 최초의 HPC 클라우드
하드웨어 뿐만 아니라 클라우드로 HPC를 도입할 수 있습니다.
바로 고성능 컴퓨팅용 HPE GreenLake 입니다!
이 HPC용 GreenLake를 통해 고객사는 간편하게 환경을 업그레이드하실 수 있어요.
서비스 기반의 GreenLake로 HPC를 도입하면 어떤 장점이 있는지, 설명드릴게요.
✅ HPE GreenLake 플랫폼은 워크로드 최적화 시스템을 제공합니다.
리소스를 신속하게 구현하고, 수요 발생 전에 용량을 늘릴 수 있습니다.
좀더 자세히 말씀드리자면, 고성능 컴퓨팅이 필요한 애플리케이션이 증가하고 있기에 IT 부서는 필요한 기술을 확보하고, HPC를 광범위하게 지원하며, 증가한 수요를 관리하는 데 어려움을 겪고 있는 고객들이 계실텐데요.
HPC 용 HPE GreenLake를 통해 조직은 간편하게 환경을 확장하고 셀프서비스로 사용자를 지원할 민첩성을 확보할 수 있습니다.
✅ 또한 HPE GreenLake만의 관리 플랫폼은 온프레미스 클라우드 서비스 소비 모델로 HPC 솔루션의 우수한 유연성, 확장성, 관리 기능을 제공합니다. 진입점이 낮아지고, GPU 옵션이 더 많으며, Slingshot 고속 네트워킹, HPE 병렬 스토리지가 적용된 2세대 클라우드 서비스로 AI, 기계 학습 및 추가 HPC 기술을 활용할 수도 있어요.
✅ 가장 큰 장점인 것은 비용 과금이 바로 사용량 기반이라는 것입니다.
사용하는 만큼만 지불하고, 실시간으로 비용과 사용량을 확인할 수 있습니다.
좀더 자세한 내용을 원하시면 아래와 같이 HPE 사이트와 디케이앤유 블로그 글을 확인해보세요!
고성능 컴퓨팅용 HPE GreenLake 더 알아보기
HPE GreenLake Cloud Service 블로그 보기
시장에는 HPC 관련 많은 벤더와 제품이 존재합니다만, 저는 HPE 제품의 일부에 대해서 간단하게 말씀드렸습니다~
선택할 때는 기업 또는 조직의 요구 사항, 예산, 확장성 등을 고려하여 적합한 제품을 선택하는 것이 가장 중요하다고 생각합니다.
가장 적합한 제품을 선택하기 위해 고민하지 마시고, 저희 동국시스템즈에 문의해주세요. 📞
디케이앤유 문의하기
#HPC AI #HPC #AI #AI HPC #HPE HPC #HPE AI #HPE #HPC서버 #AI서버 #슈퍼컴퓨팅