누리온 ANSYS CFX 사용자 지침서(2020.02)

본 문서는 누리온 시스템에서 ANSYS CFX 소프트웨어 사용을 위한 기초적인 정보를 제공하고 있습니다.  

따라서, ANSYS CFX 소프트웨어 사용법 및 누리온/리눅스 사용법 등은 포함되어 있지 않습니다.  

누리온/리눅스 사용법에 대한 정보는 KISTI 홈페이지 (https://www.ksc.re.kr)의 기술지원 > 지침서 내 누리온 사용자 지침서 등을 참고하시기 바랍니다.

 

1. 사용 정책 

 - 사용자별 최대 40개 CPU 코어 수행 가능합니다.

 - 한정된 라이선스를 슈퍼컴 사용자들이 함께 사용하므로, 사용정책 기준을 초과하여 사용할 경우 해당 작업은 관리자가 강제 종료 합니다.

 - 부득이하게 많은 라이선스가 필요할 경우, 

KISTI 홈페이지 (https://www.ksc.re.kr)를 통해 사전에 관리자와 협의해야 합니다.

 - 시스템의 로그인 노드의 과부하 방지를 위해 pre/post 작업은 허가하지 않습니다. 

 

- 2019년 3월 PM 이후(3월14일)

에는 작업제출 스크립트에 "#PBS -A ansys " 옵션을 사용해야 합니다.

 

2. 소프트웨어 설치 정보

(1) 설치 버전 

 - v145, v170, v181, v191, v192, v195, v201

 

(2) 설치 위치 

 - /apps/commercial/ANSYS/(version)/CFX

 

※ 위 version 의 위치에 사용하기 원하는 CFX 버전, 즉, v145, v170, v181, v191. v192, v195, v201 중의 하나로 교체하기 바랍니다.

 

(3) 실행 파일 경로 

 - /apps/commercial/ANSYS/(version)/CFX/bin

 

※ 위 version 의 위치에 사용하기 원하는 CFX 버전, 즉, 

v145, v170, v181, v191, v192, v195, v201 

중의 하나로 교체하기 바랍니다.

 

3. 소프트웨어 실행 방법

(1) 실행 방법

  - 명령어 실행 전 환경설정을 위한 스크립트를 먼저 실행합니다. 

    (예) cfx v181을 사용하려면, 아래와 같이 수행합니다.

$ module load cfx/v181

 ※ module 환경 설정 파일이 존재합니다. 위의 예제를 참고하여 알맞은 환경 설정을 하시면 됩니다. 

 

  - 다음과 같이 batch mode로 job을 실행하기 위한 명령어 입력

형식	cfx5solve [option]
option	-def <file> definition 파일 (또는 restart를 위한 result 파일) 지정  -parallel 병렬 모드로 실행  -par-local parallel run on the local host only  -par-dist distributed parallel run  -part <#partition> partitioning 모드로 solver를 실행  -parfile <file> partitioning 정보 파일 지정  -help 사용가능 키워드 나열
예제	cfx5solve -def model.def  cfx5solve -def model.def -par-local -partition 2  cfx5solve -def model.def -parallel -parfile model.par  cfx5solve -def model.def -initial model_003.res -par-local -partition 2

 - 로그인노드에서 Interactive 방식의 실행은 CPU time이 10분으로 제한되어 있습니다.

 - 장시간의 계산 작업은 PBS Professional 이라는 스케쥴러를 이용하여 작업을 제출해야 합니다.

 

 

(2) 스케쥴러 작업 스크립트 파일 작성

 5호기 시스템에서는 로그인 노드에서 PBS Professional 이라는 스케쥴러를 사용하여 작업을 제출해야 합니다. 

 

 5호기 시스템에서 스케쥴러를 사용하는 예제 파일들이 아래의 경로에 존재하므로 사용자 작업용 파일을 만들 때 이를 참고하시기 바랍니다. 

 - 예제 파일 :  /apps/commercial/test_samples/ANSYS/cfx_v181.sh (단일노드에서 수행)

                   /apps/commercial/test_samples/ANSYS/cfx_v181_multinode.sh (멀티 노드에서 수행)  

 

 

 

※ 아래 예제는 5호기 시스템에서의 CFX에 대한 예제입니다. (단일노드에서 수행)

#!/bin/sh #PBS -V                                                                              #PBS -N cfx_job                                                                     # job 이름 지정 #PBS -q commercial                                                               # queue 지정 #PBS -l select=1:ncpus=40:mpiprocs=40:ompthreads=1                 # 작업 청크 단위 지정 #PBS -l walltime=04:00:00                                                       # 예상 작업 소요 시간 지정 #PBS -A ansys    cd $PBS_O_WORKDIR   TOTAL_CPUS=$(wc -l $PBS_NODEFILE | awk '')     cfx5solve -def StaticMixer.def -par-local -partition ${cpus}            # CFX 명령 실행

 - 위에서 예제는 사용자가 적절히 수정해야 합니다.

 - 2019년 3월 PM 이후

(3월14일)

 부터는 "#PBS -A ansys " 옵션이 없는 경우 작업제출이 되지 않습니다.

 - 작업 제출은 스크래치 디렉토리에서만 가능 합니다.

 - 사용자별 스크래치 디렉토리는 /scratch/$USER입니다.

 - 스크래치 디스크는 작업 종료 후 일정 시간이 지나면 삭제되기 때문에, 작업이 완료 된 경우 빠른 시일 내에 백업하시길 권장합니다. 

 

 - 기타 스케쥴러에 관련된 명령어 및 사용법은 사용자 지침서를 참조하여 주십시오.

 

4. 작업 모니터링

(1) 큐 조회

 

$ showq

 

(2) 노드 상태 조회

$ pbs_status

 

(3) 작업 상태 확인

$ qstat <-a, -n, -s, -H, -x, …> ex> qstatJob id Name User Time Use S Queue-------------------------------------------------------------------0001.pbcm test_01 user01 8245:43: R commercail0002.pbcm test_03 user03 7078:45: R commercail0003.pbcm test_04 user04 1983:11: Q commercail

 

(4) 작업 제출 방법

 - 예제 : 스크립트 파일 이름이 cfx.sh 인 경우

$ qsub cfx.sh

 

(5) 제출된 작업을 강제로 종료

 - 사용 방법 : qdel [작업ID]

 - 작업ID는 qsub 명령어 실행 시 제일 왼쪽에 표시 되는 정보입니다.(ex. 0001.pbcm test_01 user01 8245:43: R norm_cache)

 - 예제 : 작업ID 가 0001.pbcm 인 경우

$ qdel 0001.pbcm