KISTI 슈퍼컴퓨팅 기술 블로그

누리온에서 PBS 작업 스크립트를 이용하여 작업을 제출하는 방법입니다.

슈퍼컴퓨터 작업 스크립트 작성법 안내입니다.

누리온 시스템의 모듈 사용 안내입니다.

Windows 사용자를 위한 슈퍼컴퓨터 접속 방법 안내 입니다.

Mac 사용자를 위한 슈퍼컴퓨터 접속 방법 안내입니다.

가. Tensorflow에서 Horovod 사용법다중노드에서 멀티 GPU를 활용할 경우 Horovod를 Tensorflow와 연동하여 병렬화가 가능하다. 아래 예시와 같이 Horovod 사용을 위한 코드를 추가해주면 Tensorflow와 연동이 가능하다. Tensorflow 및 Tensorflow에서 활용 가능한 Keras API 모두 Horovod와 연동이 가능하며 우선 Tensorflow에서 Horovod와 연동하는 방법을 소개한다. (예시: MNIST Dataset 및 LeNet-5 CNN 구조) ※ Tensorflow에서 Horovod 활용을 위한 자세한 사용법은 Horovod 공식 가이드 참조 (https://github.com/horovod/horovod#usage) ◦ Tensorflow에서..

가. Tensorflow에서 Horovod 사용법 다중노드에서 CPU를 활용할 경우 Horovod를 Tensorflow와 연동하여 병렬화가 가능하다. 아래 예시와 같이 Horovod 사용을 위한 코드를 추가해주면 Tensorflow와 연동이 가능하다. Tensorflow 및 Tensorflow에서 활용 가능한 Keras API 모두 Horovod와 연동이 가능하며 우선 Tensorflow에서 Horovod와 연동하는 방법을 소개한다. (예시: MNIST Dataset 및 LeNet-5 CNN 구조) ※ Tensorflow에서 Horovod 활용을 위한 자세한 사용법은 Horovod 공식 가이드 참조 (https://github.com/horovod/horovod#usage) ◦ Tensorflow에서 H..

Keras(케라스)는 파이썬으로 작성된 오픈 소스 신경망 라이브러리로, MXNet, Deeplearning4j, 텐서플로, Microsoft Cognitive Toolkit 또는 Theano 위에서 수행할 수 있는 High-level Neural Network API이다. 케라스의 특징은 User friendliness, Modularity, Easy Extensibility로 Multi-GPU를 사용하고자 하는 사용자도 코드를 최소한으로 수정하여 쉽게 Multi-GPU를 사용할 수 있도록 하고 있다. KISTI GPU 클러스터인 NEURON의 큐 구성은 다음과 같으며, ivy_k40_2, ivy_v100_2, cas_v100_2, cas32c_v100_2, cas_v100nv_4 큐에는 한 노드에 2,..

본 문서는 누리온 시스템에서 가우시안 소프트웨어 사용을 위한 기초적인 정보를 제공하고 있습니다. 따라서, 가우시안 소프트웨어 사용법 및 누리온/리눅스 사용법 등은 포함되어 있지 않습니다. 누리온/리눅스 사용법에 대한 정보는 KISTI 홈페이지 (https://www.ksc.re.kr)의 기술지원 > 지침서 내 누리온 사용자 지침서 등을 참고하시기 바랍니다. 1. 가우시안 소개 가우시안은 에너지, 분자구조 및 진동주파수를 예측하는 분자 모델링 패키지이며, 화학, 물리, 생명과학, 공학 분야 연구자를 위한 프로그램입니다. 자세한 사항은 가우시안 사의 홈페이지를 통해 얻을 수 있습니다. 홈페이지 주소: http://gaussian.com 2. 설치 버전 및 라이선스 - 설치 버전 : Rev.A03, Rev.B..

본 문서는 뉴론 시스템에서 가우시안 소프트웨어 사용을 위한 기초적인 정보를 제공하고 있습니다. 따라서, 가우시안 소프트웨어 사용법 및 뉴론/리눅스 사용법 등은 포함되어 있지 않습니다. 뉴론/리눅스 사용법에 대한 정보는 KISTI 홈페이지 (https://www.ksc.re.kr)의 기술지원 > 지침서 내 뉴론 사용자 지침서 등을 참고하시기 바랍니다. 1. 가우시안 소개가우시안은 에너지, 분자구조 및 진동주파수를 예측하는 분자 모델링 패키지이며, 화학, 물리, 생명과학, 공학 분야 연구자를 위한 프로그램입니다. 자세한 사항은 가우시안 사의 홈페이지를 통해 얻을 수 있습니다.홈페이지 주소: http://gaussian.com 2. 설치 버전 및 라이선스- 설치 버전 : Rev.A03, Rev.B01, Rev..

뉴론 시스템은 스케쥴러로 slurm 을 사용하고 있습니다. 이 문서에서는 사용자가 뉴론 시스템에서 기본적인 작업 제출을 할 수 있는데 목적을 두고 있으며, MPI 작업 제출 등은 별도의 문서에서 설명할 계획입니다. 그 밖의 자세한 정보는 아래를 참고해 주시기 바랍니다. [ slurm 온라인 문서 ]https://slurm.schedmd.com/documentation.html 1. 기본명령어 요약 명령어 내용 $ sbatch [옵션..] 스크립트 작업 제출 $ scancel 작업ID 작업 삭제 $ squeue 작업 상태 확인 $ smap 작업 상태 및 노드 상태 확인 $ sinfo [옵션..] 노드 정보 확인 2. sinfo slurm 노드 및 파티션 정보를 조회합니다. 사용방법 및 예제는 아래와 같습니..

본 문서는 누리온 시스템에서 ABAQUS 소프트웨어 사용을 위한 기초적인 정보를 제공하고 있습니다. 따라서, ABAQUS 소프트웨어 사용법 및 누리온/리눅스 사용법 등은 포함되어 있지 않습니다. 누리온/리눅스 사용법에 대한 정보는 KISTI 홈페이지 (https://www.ksc.re.kr)의 기술지원 > 지침서 내 누리온 사용자 지침서 등을 참고하시기 바랍니다. 1. 사용 정책 - 사용자별 최대 40개 CPU 코어 수행 가능합니다. - 한정된 라이선스를 슈퍼컴 사용자들이 함께 사용하므로, 사용정책 기준을 초과하여 사용할 경우 해당 작업은 관리자가 강제 종료 합니다. - 부득이하게 많은 라이선스가 필요할 경우, KISTI 홈페이지 (https://www.ksc.re.kr)를 통해 사전에 관리자와 협의해야..

본 문서는 누리온 시스템에서 OpenFOAM 소프트웨어 사용을 위한 기초적인 정보를 제공하고 있습니다. 따라서, OpenFOAM 소프트웨어 사용법 및 누리온/리눅스 사용법 등은 포함되어 있지 않습니다. 누리온/리눅스 사용법에 대한 정보는 KISTI 홈페이지 (https://www.ksc.re.kr)의 기술지원 > 지침서 내 누리온 사용자 지침서 등을 참고하시기 바랍니다.OpenFOAM 사용법에 대한 정보는 OpenFOAM 사이트(https://www.openfoam.com, https://openfoam.org, http://openfoamwiki.net)를 참고하시기 바랍니다. 1. 소프트웨어 설치 정보(1) 설치 버전 - 4.1(KNL, SKL), 5.0(KNL, SKL), 7.0(KNL, SKL),..

2019년 05월 서비스 오픈하는 뉴론 시스템의 제원은 다음과 같습니다. 1. GPU 노드 제원 (1) ivy_k40_2 구분 내용 CPU Intel(R) Xeon(R) CPU E5-2670 v2 @ 2.5GHz ( 노드 당 2 소켓, 총 20코어 ) GPU NVIDIA Tesla K40m (1 노드당 2 K40 카드 탑재) CPU 메모리 DDR3/1866MHz (노드당 128GB, CPU 코어 당 6.4GB) GPU 메모리 K100 카드당 12GB 운영체제 CentOS 7.4 할당 노드 수 4 Total CPU core 수 80 최대제출/실행 작업개수 2 사용자별 최대 GPU 점유개수 6 (2) ivy_v100 구분 내용 CPU Intel(R) Xeon(R) CPU E5-2670 v2 @ 2.5GHz ..

본 문서는 누리온 시스템에서 가우시안 소프트웨어 사용을 위한 기초적인 정보를 제공하고 있습니다. 따라서, 가우시안 소프트웨어 사용법 및 누리온/리눅스 사용법 등은 포함되어 있지 않습니다. 누리온/리눅스 사용법에 대한 정보는 KISTI 홈페이지 (https://www.ksc.re.kr)의 기술지원 > 지침서 내 누리온 사용자 지침서 등을 참고하시기 바랍니다. 1. 가우시안 소개 가우시안은 에너지, 분자구조 및 진동주파수를 예측하는 분자 모델링 패키지이며, 화학, 물리, 생명과학, 공학 분야 연구자를 위한 프로그램입니다. 자세한 사항은 가우시안 사의 홈페이지를 통해 얻을 수 있습니다. 홈페이지 주소: http://gaussian.com 2. 설치 버전 및 라이선스 - KISTI 슈퍼컴퓨팅센터는 가우시안 16..