웹 서버를 한 대씩 재시작하고 문제가 나면 멈추기
여러 대를 한꺼번에 재시작했다가 전부 죽는 사고를 피합니다. 한 대씩 재시작하고 상태를 확인한 뒤 다음으로 넘어가며, 실패하면 거기서 멈춥니다.
Pro0.10.0 판부터설정 5분
쓰는 기능일괄 실행롤링 실행실패만 다시 실행위험 명령 확인

이런 상황
설정을 바꾸고 웹 서버 열 대를 재시작해야 합니다. 한꺼번에 보내면 설정에 오타가 있을 때 열 대가 동시에 내려갑니다. 그래서 보통은 한 대씩 접속해 재시작하고, 뜨는지 보고, 다음 서버로 갑니다.
일괄 실행의 롤링 실행이 이 순서를 대신합니다. 몇 대씩 나눠 실행하고, 실패가 정한 수를 넘으면 남은 서버에는 명령을 보내지 않습니다.
방법
- 레일의 일괄 실행에서 웹 서버 그룹을 체크합니다.
- 스크립트로 실행을 켜고 재시작과 확인을 한 묶음으로 적습니다. 마지막 줄이 실패하면 그 서버는 실패로 기록됩니다.
- 롤링 실행을 켜고 한 번에 1대, 허용할 실패 0대로 둡니다.
- 미리보기로 서버별 명령을 확인하고 실행합니다.
2번에 넣을 스크립트입니다.
sudo -n nginx -t
sudo -n systemctl restart nginx
sleep 3
curl -fsS -o /dev/null http://127.0.0.1/healthz
첫 서버에서 설정 검사나 상태 확인이 실패하면 거기서 멈추고, 나머지 아홉 대는 건드리지 않습니다. 고친 뒤에는 실패한 서버만 다시 실행으로 이어 갑니다.
쓰는 요령
- 한 대로 먼저 확인하고 싶다면 대상에서 한 대만 체크해 실행한 뒤 나머지를 롤링으로 돌립니다.
- 로드 밸런서에서 빼고 넣는 명령이 있다면 스크립트의 앞뒤에 넣습니다.
- 서버 수가 많으면 한 번에 2~3대로 올려 시간을 줄입니다.
알아 둘 점
- 일괄 실행은 묻는 창을 띄우지 않으므로
sudo비밀번호를 입력할 수 없습니다. 재시작 명령은 비밀번호 없이 실행되도록 서버에서 허용해 두어야 하고, 예시의sudo -n은 허용이 안 된 서버에서 기다리지 않고 바로 실패하게 합니다. - 운영 서버가 들어 있으면 실행 전에 대상 수를 입력해야 합니다.
- 스크립트는 줄 하나가 실패해도 다음 줄로 넘어갑니다. 앞 단계 실패에서 바로 멈추게 하려면 첫 줄에
set -e를 넣습니다.
롤링 실행이 실패 한도에서 멈추고 뒤 서버에 명령을 보내지 않는 것을 자동 시험으로 확인했습니다.