[Linux] nohub으로 자동배포(CI/CD) 개선하기(흉내내기)

회사에서 새로운 환경을 구축하게되었는데 CI/CD의 문제점이 있었다.

 

Jenkins를 이용해 빌드 및 배포를 진행하게 구축되었는데 내부 보완적인 문제로 인해서 jenkins에서 웹서버에 ssh 연결 후 사용할 수 있는 execute command의 제약이 걸렸다. 빌드된 tar 파일을 웹서버(linux 서버)에 전달만 가능했고 차후 직접 웹서버에 원격 접속해서 소스 파일이 풀려야할 타겟 위치에서 수동으로 풀어줘야했다.

 

자동배포를 진행하기 위해서는 jenkins 자체의 기능을 이용할 수 없으니 웹서버(linux)에 기능을 만들기로 했다.

1. 플래그(flag) 파일 만들기

빌드된 소스 파일이 외에 소스 파일의 정보를 담은 텍스트 파일을 하나 생성하여 함께 웹서버로 전달한다.

내 경우에는 빌드가 이뤄지는 work 여러개 존재해서 이를 구분할 수 있는 {JOB_NAME}을 플래그 파일에 작성해서 전달했다.

 

예시

$ echo ${JOB_NAME} > deploy_flag.txt

2. 배포 쉘 만들기

배포 쉘의 내용은 특정 위치에 플래그 파일이 있을 경우, 플래그 파일의 내용을 읽어서 job에 맞는 위치에 소스를 배포해주고 완료되면 플래그 파일을 삭제한다. 플래그 파일은 2초에 한번씩 확인한다.

3. 와쳐(watcher) 만들기

1번에서 작성한 플래그 파일이 생성되었을 때, 2번에서 만든 배포 쉘이 수행될 수 있게 와쳐(watcher)를 리눅스 nohub을 이용해서 만들수 있다. nohub은 웹서버에 접속한 유저의 세션이 종료되어도 프로세스가 수행될 수 있게해주는 유틸리티이다.

 

백그라운드에서 프로세스 수행하기

$ nohup command [arguments] &

위 명령어를 통해서 백그라운드에서 프로세스를 수행할 수 있다. '&'를 제외하면 세션이 종료되었을 때, 프로세스가 종료되게끔할 수 있다.

 

배포 쉘 백그라운드 실행하기

$ nohub sh /deploy.sh &

2에서 작성한 배포 쉘이 root 경로(/)의 deploy.sh이라는 이름의 쉘일 경우, 위와 같이 백그라운드로 실행할 수 있다.

 

nohub을 실행하면 추가 명령어를 입력할 수 있게끔 나오는데 아무키나 누르거나 ctl + c로 종료하면 된다.

종료하여도 백그라운드에서 deploy.sh은 계속 실행된다.

nohub을 실행한 위치에 nohub.out 파일이 생성되었다면, 정상적으로 수행된 것이다. 해당 파일은 nohub으로 실행한 프로세스의 로그파일로 deploy.sh에 echo 등으로 특정 상황에서 출력명령어를 수행한다면, 로그를 쌓아서 확인할 수 있다.

4. nohub 프로세스 종료하기

$ ps -ef | grep deploy

deploy.sh을 수행하고 있는 프로세스의 id를 확인한다.

$ kill -9 [processId]

# 예시: kill -9 5876

확인한 프로세스 id를 강제종료(9 옵션) 시킨다.

 

폐쇄망이나 보안정책이 강력한 환경에서 부족한 CI/CD 환경을 위와 같은 방식으로 개선할 수 있었다.