빅 컴퓨팅 팟캐스트 – 학계에서 HPC를 다시 생각하다


이번에 빅 컴퓨트 팟캐스트 에피소드, 진행자 Gabriel Broner가 바르샤바 대학교 HPC 센터 ICM 이사인 Marek Michalewicz를 인터뷰합니다. HPC 클라우드 플랫폼의 출현으로 모든 사용자가 여러 센터와 클라우드의 시스템에 간단하고 유연하게 액세스할 수 있도록 지원하는 기회와 이점에 대한 대화가 중심이 되었습니다.

미래의 빅 컴퓨팅 팟캐스트 에피소드 등록
개요 및 주요 의견
학계에서 HPC를 다시 생각하다
학계의 HPC는 주로 온프레미스에서 이루어졌습니다. 특정 아키텍처의 시스템은 일반적으로 XNUMX년 동안 유지되지만 시간이 지남에 따라 상대적 성능이 저하됩니다. 활용도가 높으므로 사용자 작업이 대기열에서 대기합니다. HPC 클라우드 플랫폼의 출현으로 이제 학계를 위한 HPC를 다시 생각해 볼 때가 되었습니다. 하나의 기관, 하나의 시스템 대신 온프레미스, 여러 센터 및 클라우드의 시스템에 대한 액세스를 지원할 수 있습니다. 현재와 ​​동일한 수준의 지출로 여러 아키텍처, 최신 기술에 접근하고 대기 시간을 줄임으로써 과학 개발 시간을 단축하고 새로운 연구 영역을 활성화할 수 있습니다.
HPC용 클라우드 플랫폼
Michalewicz는 우리가 필연적으로 학계를 위한 클라우드 접근 방식으로 전환하고 있으며 이는 발생한 진화 단계의 자연스러운 진행이라고 믿습니다.
“우리는 클라우드 HPC 솔루션에 직접 진출하고 있습니다. 나는 실제로 그것을 이미 존재했던 기술의 갱신과 확장으로 본다. 몇 년 전 폴란드의 Cyfronet 연구 센터는 PLGrid 그리드 시스템을 개발했습니다. 클라우드만큼 확장성과 유연성이 없고 견고하지만 사용자는 다양한 센터의 리소스를 사용할 수 있습니다. HPC 클라우드 솔루션을 통해 구현되는 훨씬 더 정교하고 유연한 기술로 전환하는 것은 자연스러운 진행입니다. 여기서 벗어날 방법이 보이지 않습니다.”
“우리는 기술적이고 비즈니스적인 솔루션을 찾아야 할 때를 기다려야 했습니다. 사람들은 오랫동안 유틸리티 컴퓨팅에 대해 이야기해 왔습니다. 지금 일어나고 있습니다. Cray는 인스턴스로 사용할 수 있으며 FPGA 또는 GPU도 마찬가지입니다. 바로 그런 일이 일어나야 합니다.”
“양자 컴퓨팅과 같은 새로운 아키텍처는 매우 흥미롭지만 접근할 수 없습니다. 매우 다양한 컴퓨팅 아키텍처를 연구에 사용할 수 있다면 정말 환상적일 것입니다.”
변화의 과제
Michalewicz는 변화 여정의 과제에 대해 경고하면서 특히 사람 측면을 강조합니다.
“장애물에는 다양한 종류가 있습니다. 특히 사람들이 통제력을 잃는 것을 두려워하기 때문에 심리적인 인적 요소가 있습니다. 나는 XNUMX년 전에 사람들이 클라우드에 대해 매우 회의적인 것을 보았습니다. 기술적인 장애물이 극복되었습니다. 사람들은 자신의 지위를 잃을까 봐 두려워합니다. 현실은 HPC 리소스를 프로비저닝하는 곳마다 전문 지식이 필요하다는 것입니다. 대신 사람들은 새로운 사용자와 전문 지식을 공유할 수 있는 시기인 붐이 다가오고 있다고 생각해야 합니다.”
“HPC와 기존 IT 사이에도 장벽이 있습니다. 엔터프라이즈 공간에 거주하는 사람들은 HPC의 요구 사항을 진정으로 이해하지 못할 수도 있습니다. HPC 직원이 시스템을 클라우드로 설정하려고 하면 IT 직원은 우리가 자신의 영역을 침해하고 있다고 느낄 수 있지만 이러한 장벽을 제거해야 합니다. 우리는 이것이 운영자가 아닌 사용자를 위한 장벽을 제거하는 것임을 기억해야 합니다.”
모두를 위한 HPC
Michalewicz는 HPC 클라우드 플랫폼의 단순성으로 인해 HPC가 소수의 사람들에게만 국한되지 않을 것이라고 믿습니다.
“Euro HPC는 엄청나게 큰 리소스를 제공하지만 이러한 리소스 중 일부는 매우 노련한 사용자에게 더 적합할 것입니다. 나는 아직 HPC를 시도하지 않은 학술 환경의 "신입" 그룹에 관심이 있습니다. 이 그룹의 경우 반드시 대규모에 관한 것이 아니라 제한 없이 확장할 수 있는 리소스를 보유할 수 있는 "느낌"과 능력에 관한 것입니다."
“저는 HPC를 사용해보지 않은 사람들을 적극적으로 찾습니다. 저는 싱가포르에 있을 때 학생 팀을 시작했는데 그 팀이 미국 슈퍼컴퓨팅 클러스터 대회에서 우승했습니다. 최근에는 바르샤바 팀을 시작했고 그들은 XNUMX번째 결승전에 진출할 예정입니다. 두 팀이 서로 경쟁을 벌이고 있습니다. 새로운 사람들이 HPC에 와서 몇 년간의 교육을 거쳐 능숙해지는 모습을 보는 것은 정말 즐겁습니다.”
“바르샤바 대학교에는 학생이 50,000명 있는데 등록된 HPC 사용자는 1,000명에 불과합니다. 저는 대학의 모든 사람이 1개에서 10,000개 코어까지 확장 가능한 리소스에 액세스할 수 있는 것을 보고 싶습니다. 저는 어떤 규모에서든 컴퓨팅 리소스에 접근하는 데 방해가 되는 장애물을 완전히 없애고 싶습니다.”
요약하자면
전통적인 온프레미스 모델에서 여러 센터의 클라우드로 전환하려는 생각은 수년에 걸쳐 발전해 왔습니다. 차이점은 클라우드와 HPC용 클라우드 플랫폼의 출현으로 이를 현실화하는 데 장애물이 제거되었을 수 있다는 것입니다. 이러한 대규모 컴퓨팅 용량과 사용 가능한 다양한 아키텍처는 기존 HPC 연구자들에게 도움이 될 것입니다. 동시에 단순성과 유연성 덕분에 모든 연구원과 학생이 HPC에 액세스할 수 있습니다.

마렉 미칼레비츠
Marek Michalewicz는 바르샤바 대학의 고성능 컴퓨팅 센터인 ICM의 이사입니다. 업계에서 수년 동안 Marek은 싱가포르의 A*STAR 전산 연구 센터를 비롯한 학술 및 연구 HPC 센터를 이끌었습니다.
가브리엘 브로너
Gabriel Broner는 Rescale의 HPC 부사장 겸 GM입니다. 2017년 25월 Rescale에 합류하기 전에 Gabriel은 Cray의 OS 설계자, Microsoft의 GM, Ericsson의 혁신 책임자, SGI/HPE의 HPC VP 및 GM으로 업계에서 XNUMX년을 보냈습니다.

비슷한 게시물