지금 버전이 아닌 예전 old README.md를 읽어보고 여기에도 내가 원하는 기능이 없다면 이 글을 읽어보자.
콘도르를 사용하기 위해선 두개의 파일이 필요하다.
- 실행파일
- 제출파일
실행파일 제출파일 안에 적고 condor_submit 명령어를 이용하여 제출파일을 제출한다.
$ condor_submit [제출파일]
즉, 콘도르를 통해서 일을 시키는 방법은 제출파일을 제출하는것 뿐이다. 따라서 실행파일을 바꾸거나 매개변수를 바꾸려면 매번 제출파일의 내용을 수정해야 한다. 이렇게 수정하는 작업이 귀찮기 때문에 old README.md 에서 설명한 condor_executable.sh 파일은 뒤에 오는 매개변수들을 이용해 알아서 제출파일을 1)만들고 2)제출하고 3)지우는 일을 하도록 만들었다. 하지만 언젠가는 제출파일을 직접 써야 하는 때가 올 수도 있다.
제출파일의 내용은 다음과 같다.
[옵션1] = [값1]
[옵션2] = [값2]
...
[옵션N] = [값N]
Queue
마지막에 "Queue" 제외하고 모두 "[옵션] = [값]"의 형태를 지닌다. 우린 단지 어떤 [옵션]이 어떤 [값]을 넣었을때 어떻게 작동하는지 알고있으면 된다.
아래에 우리가 쓸만한 옵션들을 적어보았다. 더 많은 옵션들을 보고 싶다면 condor_submit를 참고하자. 참고로 제출파일은 대소문자를 구분하지 않으며 주석은 "#" 이용한다.
| 옵션 | 설명 | 예제 |
|---|---|---|
| executable | 실행파일 이름 | executable = example.sh |
| universe | 실행 옵션. 우리 서버에서는 vanilla 옵션 밖에 지원하지 않는다. 기본 설정이 vanilla 이지만 혹시 모르니 항상 적도록 하자. | universe = vanilla |
| arguments | 실행파일 이후에 오는 매개변수들을 띄어쓰기로 구분하여 적자. | arguments = i love chicken |
| initialdir | [값]의 이름으로 폴더를 만들고 결과파일들을 폴더에 저장한다. 옵션을 지정하지 않았다면 실행한 경로에 결과파일들을 저장한다. | initialdir = data |
| log | 콘도르 진행 로그를 [값]의 이름으로 생성한 파일에 저장한다. initialdir가 지정되어 있다면 파일을 initialdir에 저장한다. | log = example.log |
| input | 키보드 input을 적어둔 파일을 이용할때 사용한다. | example.in |
| output | 작업이 돌아가면서 나오는 출력들을 [값]의 이름으로 생성한 파일에 저장한다. initialdir가 지정되어 있다면 파일을 initialdir에 저장한다. | output = example.out |
| error | 작업이 돌아가면서 나오는 에러를 [값]의 이름으로 생성한 파일에 저장한다. initialdir가 지정되어 있다면 파일을 initialdir에 저장한다. | error = example.err |
| getenv | [값]이 true 라면 유저의 쉘 환경설정을 불러온다. .bash_profile 같은 설정들을 불러온다는 뜻이다. | getenv = true |
| request_cpus | [값]에 해당하는 만큼의 CPU(core)를 요청한다. 기본설정으로는 1이다. | request_cpus = 2 |
| request_memory | [값]에 해당하는 만큼의 memory를 요청한다. 숫자 끝에 알파벳을 붙여서 단위를 나타낸다. K: Kbytes, M: Mbytes. G: Gbytes. T: Tbytes. | request_memory = 1K |
| notify_user | 알림을 받아볼 이메일 주소. | notify_user = my@email.address |
| notification | notify_user에서 설정한 메일로 알림을 보낸다. Always: 모든 스텝 마다 알림, Complete: 끝났을 때 알림, Error: 이상이 있을 때마다 알림, Never(기본설정): 알리지 않음. | notification = always |
| priority | 자연수인 [값]으로 작업의 중요도를 나타낸다. 중요도가 큰 작업이 중요도가 낮은 작업보다 먼저 돌아간다. 중요도는 한 사용자의 작업들 내에서 작용하며 다른 사용자에게는 영향을 미치지 않는다. 기본 [값]은 0이다. | priority = 1 |
| queue | 일을 돌린다. queue는 예외로 값을 넣지 않는다.여러번 기입하면 기입한 만큼, 뒤에 숫자를 적으면 그만큼 일이 제출된다. | queue |
다음 예제들은 condor_basic 폴더에서 실행해 볼 수 있다.
Executable = a.out
Universe = vanilla
Log = condor_example2.log
Output = condor_example2.out
Error = condor_example2.error
Arguments = i love chicken
Queue
Executable = whoami.sh
Universe = vanilla
Queue 10
condor_executable.sh의 일부 :
Executable = $dir/$2
Arguments = $3 $4 $5 $6 $7 $8 $9
Initialdir = $dir/$idir
Log = $outfile.log
Error = $outfile.err
Output = $outfile.out
#Input = WHEN_YOU_HAVE_INPUT_FILES
Universe = vanilla
GetEnv = True
Request_cpus = 1
Notification = Always
#Notify_user = CHANGE_THIS_TO_YOUR_EMAIL
Queue