[CI/CD] Jenkins + Docker를 이용한 무중단 배포 - ④ NGINX Server Docker Job (③ NGINX 재 설정)

System 작업실/DevOps

[CI/CD] Jenkins + Docker를 이용한 무중단 배포 - ④ NGINX Server Docker Job (③ NGINX 재 설정)

주니쓰🧑‍💻 2023. 7. 6. 21:11

728x90

🗂 목차

⚠️ 아래 목차 중 몇몇개의 링크가 걸리지 않는 문제로 글 맨 하단에 다음 글로 이동할 수 있게 해 두었습니다.

🤔 내가 만난 문제

⛔️ [Jenkins] java.lang.OutOfMemoryError: Java heap space

배포 자동화와 지속적 인도:도커와 젠킨스 쿠버네티스로 만드는

COUPANG

www.coupang.com

"이 포스팅은 쿠팡 파트너스 활동의 일환으로, 이에 따른 일정액의 수수료를 제공받습니다."

🚀 NGINX Docker Run

🔽 개요

📦 구성도

📦 소개

주니가 준비한 Jenkins, Sonar Qube, Docker, Spring Boot, Nginx을 이용한 Rolling Deploy 방식 CI/CD 무중단 배포 정리가 드디어 마무리 단계에 왔어요.

이번에는 Health Check까지 정상적으로 마무리 된 NGINX Docker Container에 기본 설정 값들이 들어가 있을텐데, 이 부분을 이 곳에서 만들었던 설정 값으로 바꿔주는 작업을 해 주려고 해요.

🔽 nginxServiceSetting.sh

#!/bin/bash

set -e

NOW=$(date +"%y-%m-%d_%H:%M:%S")
SAVE_LOG_DATE=$(date +"%y-%m-%d")

echo "====================================================================================================="
echo "[$NOW] [INFO] 기깔나는 사람들 통합 관리 서버 API 무중단 배포 서버 작업 중 Nginx Container 서비스 설정 작업이 시작 되었어요."
echo "======================================[$NOW] 통합 백 오피스 api Nginx Container 서비스 설정 작업======================================"
echo "[$NOW] [INFO] Author(만든이): 주니(junyharang8592@gmail.com)"

HOST_NGINX_CONFIG_DIR="/data/deploy/giggal-total-back-office/deploy/prod/nginx/config"
HOST_NGINX_DEFAULT_CONFIG_PATH_DIR="/data/deploy/giggal-total-back-office/deploy/prod/nginx/config/conf.d"
NGINX_SHELL_SCRIPT_DIRECTORY="/data/deploy/giggal-total-back-office/deploy/prod/nginx/shell-script"
NGINX_CONFIG_DIR="/etc/nginx"
DEFAULT_CONFIG_DIR="/etc/nginx/conf.d"
NGINX_CONTAINER_NAME="nginx-total-back-office"

checkLogDirectory() {
  sleep 5

  LOG_DIR="/var/log/deploy/giggal-total-back-office"

  if [ -d "$LOG_DIR" ];
  then
    echo "=====================================================================================================" >> $LOG_DIR/"$SAVE_LOG_DATE"-deploy.log 2>&1
    echo "[$NOW] [INFO] 기깔나는 사람들 통합 관리 서버 API 무중단 배포 서버 작업 중 Nginx Blue 설정 작업이 시작 되었어요." >> $LOG_DIR/"$SAVE_LOG_DATE"-deploy.log 2>&1
    echo "======================================[$NOW] 통합 백 오피스 api Application 배포======================================" >> $LOG_DIR/"$SAVE_LOG_DATE"-deploy.log 2>&1
    echo "[$NOW] [INFO] Author(만든이): 주니(junyharang8592@gmail.com)" >> $LOG_DIR/"$SAVE_LOG_DATE"-deploy.log 2>&1
    echo "[$NOW] [INFO] LOG Directory 존재 합니다."
    echo "[$NOW] [INFO] LOG Directory 존재 합니다." >> $LOG_DIR/"$SAVE_LOG_DATE"-deploy.log 2>&1

  else
      echo "[$NOW] [INFO] cicd-admin은 mkdir 명령어를 사용할 수 없어요. 관리자 혹은 DMSO 크루에게 ${LOG_DIR} 생성을 요청해 주세요. 스크립트가 종료됩니다." >> $LOG_DIR/"$SAVE_LOG_DATE"-deploy.log 2>&1
      exit 1
  fi

  errorPageSetting
}

errorPageSetting() {

  echo "[$NOW] [INFO] 임의의 Error Page 사용을 위해 설정 작업을 시작할게요."
  echo "[$NOW] [INFO] 임의의 Error Page 사용을 위해 설정 작업을 시작할게요." >> $LOG_DIR/"$SAVE_LOG_DATE"-deploy.log 2>&1
  echo "[$NOW] [INFO] 최초 Nginx Container 안에 error.html File을 저장할 Directory 생성 작업을 시작할게요."
  echo "[$NOW] [INFO] 최초 Nginx Container 안에 error.html File을 저장할 Directory 생성 작업을 시작할게요." >> $LOG_DIR/"$SAVE_LOG_DATE"-deploy.log 2>&1

  if ! docker exec $NGINX_CONTAINER_NAME mkdir -p /var/www/html;
  then
    failedCommand "${command}"
  else
    successCommand "${command}"

    echo "[$NOW] [INFO] 새롭게 작성된 error.html File Nginx Container /var/www/html 위치에 복사 할게요."
    echo "[$NOW] [INFO] 새롭게 작성된 error.html File Nginx Container /var/www/html 위치에 복사 할게요." >> $LOG_DIR/"$SAVE_LOG_DATE"-deploy.log 2>&1

    command="docker cp ${HOST_NGINX_CONFIG_DIR}/error.html $NGINX_CONTAINER_NAME:/var/www/html/error.html"

    if ! docker cp ${HOST_NGINX_CONFIG_DIR}/error.html $NGINX_CONTAINER_NAME:/var/www/html/error.html;
    then
      failedCommand "${command}"
    else
      successCommand "${command}"

      nginxContainerDefaultConfigSetting
    fi
  fi
}

nginxContainerDefaultConfigSetting() {
  echo "[$NOW] [INFO] 기존 Nginx Container 기본 default.conf File 보안 설정 내용 추가를 위해 제거 할게요."
  echo "[$NOW] [INFO] 기존 Nginx Container 기본 default.conf File 보안 설정 내용 추가를 위해 제거 할게요." >> $LOG_DIR/"$SAVE_LOG_DATE"-deploy.log 2>&1

  command="docker exec ${NGINX_CONTAINER_NAME} rm -rf /etc/nginx/con.f/default.conf"

  if ! docker exec ${NGINX_CONTAINER_NAME} rm -rf /etc/nginx/con.f/default.conf;
  then
    failedCommand "${command}"
  else
    successCommand "${command}"
  fi

  echo "[$NOW] [INFO] 보안 설정이 추가되어 새롭게 작성된 default.conf File 복사 할게요."
  echo "[$NOW] [INFO] 보안 설정이 추가되어 새롭게 작성된 default.conf File 복사 할게요." >> $LOG_DIR/"$SAVE_LOG_DATE"-deploy.log 2>&1

  command="docker cp ${HOST_NGINX_DEFAULT_CONFIG_PATH_DIR}/default.conf $NGINX_CONTAINER_NAME:${DEFAULT_CONFIG_DIR}/default.conf"

  if ! docker cp ${HOST_NGINX_DEFAULT_CONFIG_PATH_DIR}/default.conf $NGINX_CONTAINER_NAME:${DEFAULT_CONFIG_DIR}/default.conf;
  then
    failedCommand "${command}"
  else
    successCommand "${command}"

    nginxContainerNginxConfigSetting
  fi
}

nginxContainerNginxConfigSetting() {
  echo "[$NOW] [INFO] 기존 Nginx Container 기본 nginx.conf File 제거 할게요."
  echo "[$NOW] [INFO] 기존 Nginx Container 기본 nginx.conf File 제거 할게요." >> $LOG_DIR/"$SAVE_LOG_DATE"-deploy.log 2>&1

  command="docker exec ${NGINX_CONTAINER_NAME} rm -rf /etc/nginx/nginx.conf"

  if ! docker exec ${NGINX_CONTAINER_NAME} rm -rf /etc/nginx/nginx.conf;
  then
    failedCommand "${command}"
  else
    successCommand "${command}"
  fi

  echo "[$NOW] [INFO] 새롭게 작성된 nginx.conf File 복사 할게요."
  echo "[$NOW] [INFO] 새롭게 작성된 nginx.conf File 복사 할게요." >> $LOG_DIR/"$SAVE_LOG_DATE"-deploy.log 2>&1

  command="docker cp ${HOST_NGINX_CONFIG_DIR}/nginx.conf $NGINX_CONTAINER_NAME:${NGINX_CONFIG_DIR}/nginx.conf"

  if ! docker cp ${HOST_NGINX_CONFIG_DIR}/nginx.conf $NGINX_CONTAINER_NAME:${NGINX_CONFIG_DIR}/nginx.conf;
  then
    failedCommand "${command}"
  else
    successCommand "${command}"
  fi

  echo "[$NOW] [INFO] Application 중단 없이 변경 사항 Nginx 적용 작업 실시할게요."
  echo "[$NOW] [INFO] Application 중단 없이 변경 사항 Nginx 적용 작업 실시할게요." >> $LOG_DIR/"$SAVE_LOG_DATE"-deploy.log 2>&1

  command="docker exec ${NGINX_CONTAINER_NAME} nginx -s reload"

  if ! docker exec ${NGINX_CONTAINER_NAME} nginx -s reload;
  then
    failedCommand "${command}"
  else
    successCommand "${command}"

    $NGINX_SHELL_SCRIPT_DIRECTORY/nginxHealthCheck.sh;
  fi
}

failedCommand() {
  local command=$1

  echo "[$NOW] [ERROR] ${command} 명령어 작업 실패하였어요. 스크립트를 종료합니다."
  echo "[$NOW] [ERROR] ${command} 명령어 작업 실패하였어요. 스크립트를 종료합니다." >> $LOG_DIR/"$SAVE_LOG_DATE"-deploy.log 2>&1
  exit 1
}

successCommand() {
  local command=$1

  echo "[$NOW] [INFO] ${command} 명령어 작업 성공하였어요."
  echo "[$NOW] [INFO] ${command} 명령어 작업 성공하였어요." >> $LOG_DIR/"$SAVE_LOG_DATE"-deploy.log 2>&1
}

checkLogDirectory

operationDockerStatus=$(docker ps -a)

echo "[$NOW] [INFO] 기깔나는 사람들 통합 관리 서버 API 무중단 배포 서버 작업 중 Nginx Container 서비스 제 설정 작업이 끝났어요."
echo "[$NOW] [INFO] 기깔나는 사람들 통합 관리 서버 API 무중단 배포 LOG 위치 : ${LOG_DIR}"
echo "[$NOW] [INFO] 기깔나는 사람들 통합 관리 서버 API 무중단 배포 서버 작업 중 Nginx Container 서비스 제 설정 작업이 끝났어요." >> $LOG_DIR/"$SAVE_LOG_DATE"-deploy.log 2>&1
echo "[$NOW] [INFO] 현재 운영 중인 Docker Container 정보 : "
echo "[$NOW] [INFO] 현재 운영 중인 Docker Container 정보 : " >> $LOG_DIR/"$SAVE_LOG_DATE"-deploy.log 2>&1
echo "[$NOW] [INFO] ${operationDockerStatus} "
echo "[$NOW] [INFO] ${operationDockerStatus} " >> $LOG_DIR/"$SAVE_LOG_DATE"-deploy.log 2>&1
echo -e "=====================================================================================================\n"
echo -e "=====================================================================================================\n" >> $LOG_DIR/"$SAVE_LOG_DATE"-deploy.log 2>&1

NGINX 도커 컨테이너 설정값을 바꿔주는 쉘 스크립트는 위와 같이 준비해 보았어요.

📦 errorPageSetting()

Log가 저장될 Directory 존재 여부를 확인하는 checkLogDirectory() 가 정상 작업이 완료되면 errorPageSetting()이 동작하게 된답니다.

최초 49번째 줄에서 NGINX Docker Container 내부에 명령어를 전달해 주는 명령어 docker exec를 사용하여 /var/www/html 디렉토리가 만들어질 수 있도록 해 주었어요.

호스트 서버의 경우 root가 아닌 cicd-admin이라는 계정으로 작업을 하기 때문에 mkdir 등과 같은 명령어를 쉘 스크립트에서 사용하게 되면 권한 문제로 Error가 나는데,
해당 내용은 도커 컨테이너 안에 root 계정으로 명령어를 전달해 주기 때문에 가능한 부분이에요.

디렉터리가 정상적으로 만들어지면 미리 준비해 둔 error.html을 복사하기 위해 60번째 명령어 처럼 호스트 서버의 error.html이 저장된 디렉토리에서 error.html을 찾아 NGINX Container 이름으로 해당 컨테이너에 복사할 것을 알려주고, 컨테이너 내부에 복사할 디렉토리 위치와 파일 이름을 이용하여 docker cp 명령어로 복사 작업을 진행해 주었어요.

해당 명령어가 모두 성공하게 되면 default.conf File을 복사하기 위한
nginxContainerDefaultConfigSetting()을 호출하게 됩니다.

📦 nginxContainerDefaultConfigSetting()

해당 함수의 77번째 줄에서 도커 컨테이너 내부에 rm -rf 명령어를 이용해 기존에 존재했던
default.conf File을 삭제하도록 해 주었어요.

런 뒤 89번째 줄에서 호스트 서버에 저장되어 있는 default.conf File을
대상 컨테이너 내부에 저장할 수 있도록 docker cp 명령어를 사용하여 주었어요.

이 작업이 성공적으로 끝나게 되면 nginx.conf File을 복사하기 위한
nginxContainerNginxConfigSetting()을 호출하게 됩니다.

📦 nginxContainerNginxConfigSetting()

728x90

해당 함수 105번째 줄에서 위와 마찬가지로 기존에 존재하는 nginx.conf File을 삭제하고,
117번째 줄에서 호스트 서버에 저장된 nginx.conf File을 옮겨주도록 작업해 주었어요.

그런 뒤 해당 Container가 중단되지 않고, 최신화 될 수 있도록 129번째 줄에서 nginx -s reload 명령어를 통해

새롭게 들어간 설정값들이 중단 없이 최신화 되도록 하여 주었어요.

여기까지 작업이 끝나면 다시 Health Check 작업이 이뤄질 수 있도록 nginxHealthCheck.sh를 호출하게 되고,

모든 작업이 성공적으로 끝나게 되면

이 곳으로 와서 현재 기동중인 컨테이너 정보 등을 출력 및 로그에 저장하고,
해당 스크립트를 호출했던 스크립트로 돌아가 작업을 마무리 하게 된답니다.

🔽 확인 작업

📦 Test

운영 환경에 대한 무중단 배포 준비가 모두 마무리 되었어요. 배포 관점에서 개발 환경에 경우 위 내용과 비슷하나, NGINX와 Application 구동 환경을 분리하느냐 안하느냐에 차이와 NGINX가 외부와 통신 가능한 NAT 환경 즉, DMZ Zone에 있는지 아니면 내부망에서만 사용 가능한 환경에 있는지 차이만 있어요.

[Pipeline] { (운영 환경 WAS 서버에 File 전달 및 스크립트 실행 권한 부여)
[Pipeline] script
[Pipeline] {
[Pipeline] step
SSH: Connecting from host [23565769b6a7]
SSH: Connecting with configuration [op-total-back-office-was] ...
SSH: Creating session: username [cicd-admin], hostname [192.168.20.12], port [9,998]
SSH: Connecting session ...
SSH: Connected
SSH: Opening SFTP channel ...
SSH: SFTP channel open
SSH: Connecting SFTP channel ...
SSH: Connected
SSH: cd [/data/deploy/giggal-total-back-office]
SSH: OK
SSH: Opening exec channel ...
SSH: EXEC: channel open
SSH: EXEC: STDOUT/STDERR from command [rm -rf *;] ...
SSH: EXEC: connected
SSH: EXEC: completed after 201 ms
SSH: cd [/data/deploy/giggal-total-back-office]
SSH: OK
SSH: cd [deploy/prod/was/docker/]
SSH: OK
SSH: cd [build/libs]
SSH: OK
SSH: put [GiggalPeopleBackOffice-0.0.1-SNAPSHOT.jar]
SSH: OK
SSH: cd [/data/deploy/giggal-total-back-office]
SSH: OK
SSH: cd [deploy/prod/was/docker]
SSH: OK
SSH: put [Dockerfile]
SSH: OK
SSH: cd [/data/deploy/giggal-total-back-office]
SSH: OK
SSH: cd [deploy/prod/was/shell-script/application]
SSH: OK
SSH: put [applicationContainerExistenceStatusCheck.sh]
SSH: OK
SSH: put [applicationContainerNewRun.sh]
SSH: OK
SSH: put [applicationHealthCheck.sh]
SSH: OK
SSH: cd [/data/deploy/giggal-total-back-office]
SSH: OK
SSH: cd [deploy/prod/was/shell-script]
SSH: OK
SSH: put [createDockerImageAndBackup.sh]
SSH: OK
SSH: Opening exec channel ...
SSH: EXEC: channel open
SSH: EXEC: STDOUT/STDERR from command [chmod +x /data/deploy/giggal-total-back-office/deploy/prod/was/shell-script/createDockerImageAndBackup.sh;                                                                           chmod +x /data/deploy/giggal-total-back-office/deploy/prod/was/shell-script/application/applicationContainerExistenceStatusCheck.sh;                                                                           chmod +x /data/deploy/giggal-total-back-office/deploy/prod/was/shell-script/application/applicationContainerNewRun.sh;                                                                           chmod +x /data/deploy/giggal-total-back-office/deploy/prod/was/shell-script/application/applicationHealthCheck.sh;                                                                           chmod +x /data/deploy/giggal-total-back-office/deploy/prod/was/shell-script/nginx/nginxDockerContainerRun.sh;                                                                           chmod +x /data/deploy/giggal-total-back-office/deploy/prod/was/shell-script/nginx/nginxServiceSetting.sh;                                                                           chmod +x /data/deploy/giggal-total-back-office/deploy/prod/was/shell-script/nginx/nginxHealthCheck.sh] ...
SSH: EXEC: connected
SSH: EXEC: completed after 201 ms
SSH: Disconnecting configuration [op-total-back-office-was] ...
SSH: Transferred 6 ( 0 + 1 + 5 ) file(s)
[Pipeline] echo
운영 환경 Application 서버에 File 전달 및 스크립트 쓰기 권한 설정 작업 소요 시간 : 2.252 초
[Pipeline] }
[Pipeline] // script
Post stage
[Pipeline] script
[Pipeline] {
[Pipeline] discordSend
Sending notification to Discord.
[Pipeline] }
[Pipeline] // script
[Pipeline] }
[Pipeline] // stage
[Pipeline] stage
[Pipeline] { (운영 환경 Docker Image 생성 및 Backup 작업)
[Pipeline] script
[Pipeline] {
[Pipeline] sshPublisher
SSH: Connecting from host [23565769b6a7]
SSH: Connecting with configuration [op-total-back-office-was] ...
SSH: Creating session: username [cicd-admin], hostname [192.168.20.12], port [9,998]
SSH: Connecting session ...
SSH: Connected
SSH: Opening exec channel ...
SSH: EXEC: channel open
SSH: EXEC: STDOUT/STDERR from command [/data/deploy/giggal-total-back-office/deploy/prod/was/shell-script/createDockerImageAndBackup.sh] ...
SSH: EXEC: connected
[23-07-06_15:37:04] [INFO] 기깔나는 사람들 통합 관리 서버 API 도커 이미지 생성 및 도커 백업 작업이 시작 되었어요.
======================================[23-07-06_15:37:04] 통합 백 오피스 도커 이미지 생성 및 도커 백업======================================
[23-07-06_15:37:04] [INFO] Author(만든이): 주니(junyharang8592@gmail.com)
[23-07-06_15:37:04] [INFO] LOG Directory 존재 합니다.
[23-07-06_15:37:04] [INFO] 이름 없는 (고아) Docker Image 삭제 작업 시작할게요.
[23-07-06_15:37:04] [INFO] 현재 존재하는 Docker Image 내역 : 
[23-07-06_15:37:04] [INFO] REPOSITORY                            TAG       IMAGE ID       CREATED             SIZE
giggal-people/total-back-office-api   latest    48158841af86   19 minutes ago      712MB
<none>                                <none>    e52dcee00cf8   About an hour ago   712MB
openjdk                               11        47a932d998b7   11 months ago       654MB 
<none>                                <none>    e52dcee00cf8   About an hour ago   712MB
Deleted: sha256:e52dcee00cf8887b56ba675965ae39dc1fea9c57eaccc28056bdba1a79e39140
Deleted: sha256:bd3022e2f8c4216a5e4b4332bb75070e09b94558be19b8625a09126e8532a09d
Deleted: sha256:d3c2ecf5348f26cfa03d8e5492899dda2f18283aac70a259654538ade223f847
Deleted: sha256:01ab7e8b784dbdca7f3d1dac62b697b67306337e4234ae64f392264a6aae5dbd
Deleted: sha256:9e1b9c745d886e6149c1d91edc6c37f3f4840996664878b4cb7af3d57c8013f2
Deleted: sha256:42f80d8081299812e3ce663d57456708901240aad3d96228341d0b5e3fd86605
[23-07-06_15:37:04] [INFO] 이름 없는 Docker Image 삭제 작업 성공하였어요.
[23-07-06_15:37:04] [INFO] 현재 존재하는 Docker Image 내역 : 
[23-07-06_15:37:04] [INFO] REPOSITORY                            TAG       IMAGE ID       CREATED          SIZE
giggal-people/total-back-office-api   latest    48158841af86   19 minutes ago   712MB
openjdk                               11        47a932d998b7   11 months ago    654MB 
[23-07-06_15:37:04] [INFO] Docker Image 생성 작업을 위해 docker Image 이름에 대한 변수 설정 작업을 시작합니다.
[23-07-06_15:37:04] [INFO] giggal-people/total-back-office-api Docker Image 생성 작업 시작할게요.
Sending build context to Docker daemon   57.5MB

Step 1/9 : FROM openjdk:11
 ---> 47a932d998b7
Step 2/9 : MAINTAINER 주니 <junyharang8592@gmail.com>
 ---> Using cache
 ---> 04fc51c0bc9e
Step 3/9 : ARG JAR_FILE=./build/libs/*.jar
 ---> Using cache
 ---> 918c11934d73
Step 4/9 : RUN mkdir -p /app
 ---> Using cache
 ---> 98ec9a6f9800
Step 5/9 : WORKDIR /app
 ---> Using cache
 ---> 43b98153aa00
Step 6/9 : COPY ${JAR_FILE} /app/application.jar
 ---> c7d9acd01bb1
Step 7/9 : ENV TZ=Asia/Seoul
 ---> Running in abb475aa4ff8
Removing intermediate container abb475aa4ff8
 ---> 044ab2aa32b6
Step 8/9 : RUN ln -snf /usr/share/zoneinfo/$TZ /etc/localtime && echo $TZ > /etc/timezone
 ---> Running in ae46d6934e65
Removing intermediate container ae46d6934e65
 ---> 432d9ca92087
Step 9/9 : ENTRYPOINT ["java", "-jar", "-Dspring.profiles.active=prod", "/app/application.jar", "-Djava.net.preferIPv4Stack=true", "-Duser.timezone=Asia/Seoul"]
 ---> Running in 690ff4099c43
Removing intermediate container 690ff4099c43
 ---> 83efea94d982
Successfully built 83efea94d982
Successfully tagged giggal-people/total-back-office-api:latest
giggal-people/total-back-office-api   latest    83efea94d982   1 second ago     712MB
[23-07-06_15:37:04] [INFO] giggal-people/total-back-office-api Docker Image 생성 작업 성공하였어요.
[23-07-06_15:37:04] [INFO] giggal-people/total-back-office-api Docker Image Back Up 작업 시작할게요.
[23-07-06_15:37:04] [INFO] Docker Backup Directory 가 존재하는지 확인해 볼게요.
total 2119308
drwxr-xr-x 2 cicd-admin cicd-admin       153 Jul  6 15:18 .
drwxr-xr-x 3 cicd-admin cicd-admin        25 Jul  3 15:42 ..
-rw------- 1 cicd-admin cicd-admin 723386880 Jul  4 20:43 23-07-04-giggal-total-back-office-api.tar
-rw------- 1 cicd-admin cicd-admin 723386880 Jul  5 23:51 23-07-05-giggal-total-back-office-api.tar
-rw------- 1 cicd-admin cicd-admin 723386880 Jul  6 15:18 23-07-06-giggal-total-back-office-api.tar
[23-07-06_15:37:04] [INFO] Docker Backup Directory /data/deploy/giggal-total-back-office/deploy/prod/backup/application 가 존재 합니다.
[23-07-06_15:37:04] [INFO] giggal-people/total-back-office-api Docker Image 백업 작업 성공하였어요.
[23-07-06_15:37:04] [INFO] 기깔나는 사람들 통합 관리 서버 API 도커 이미지 생성 및 도커 백업 LOG 위치 : /var/log/docker/giggal-total-back-office/api
[23-07-06_15:37:04] [INFO] 기깔나는 사람들 통합 관리 서버 API 도커 이미지 생성 및 도커 백업 작업이 끝났어요.
=====================================================================================================

SSH: EXEC: completed after 84,470 ms
SSH: Disconnecting configuration [op-total-back-office-was] ...
SSH: Transferred 0 file(s)
[Pipeline] echo
운영 환경 Docker Image 생성 및 Backup 작업 소요 시간 : 85.01 초
[Pipeline] }
[Pipeline] // script
Post stage
[Pipeline] script
[Pipeline] {
[Pipeline] discordSend
Sending notification to Discord.
[Pipeline] }
[Pipeline] // script
[Pipeline] }
[Pipeline] // stage
[Pipeline] stage
[Pipeline] { (운영 환경 Application Docker 관련 작업)
[Pipeline] script
[Pipeline] {
[Pipeline] sshPublisher
SSH: Connecting from host [23565769b6a7]
SSH: Connecting with configuration [op-total-back-office-was] ...
SSH: Creating session: username [cicd-admin], hostname [192.168.20.12], port [9,998]
SSH: Connecting session ...
SSH: Connected
SSH: Opening exec channel ...
SSH: EXEC: channel open
SSH: EXEC: STDOUT/STDERR from command [/data/deploy/giggal-total-back-office/deploy/prod/was/shell-script/application/applicationContainerExistenceStatusCheck.sh] ...
SSH: EXEC: connected
[23-07-06_15:38:32] [INFO] 기깔나는 사람들 통합 관리 서버 API 무중단 배포 서버 작업 중 Application Docker Container 존재 여부 확인 작업이 시작 되었어요.
======================================[23-07-06_15:38:32] 통합 백 오피스 api Application Docker Container 존재 여부 확인======================================
[23-07-06_15:38:32] [INFO] Author(만든이): 주니(junyharang8592@gmail.com)
[23-07-06_15:38:32] [INFO] LOG Directory 존재 합니다.
[23-07-06_15:38:32] [INFO] Application 컨테이너 존재 여부 확인할게요.
[23-07-06_15:38:32] [INFO] MAIN 환경 기준 컨테이너 존재 여부 확인할게요.
[23-07-06_15:38:32] [INFO] SUB 환경 기준 컨테이너 존재 여부 확인할게요.
[23-07-06_15:38:32] [INFO] giggal-total-back-office-api-main, giggal-total-back-office-api-sub 컨테이너가 존재 합니다.
=====================================================================================================
[23-07-06_15:38:37] [INFO] 기깔나는 사람들 통합 관리 서버 API 무중단 배포 서버 작업 중 새로운 Application Docker Container 기동 작업이 시작 되었어요.
======================================[23-07-06_15:38:37] 통합 백 오피스 서버 배포======================================
[23-07-06_15:38:37] [INFO] Author(만든이): 주니(junyharang8592@gmail.com)
[23-07-06_15:38:37] [INFO] LOG Directory 존재 합니다.
[23-07-06_15:38:37] [INFO] 기존 Docker Container 중지 및 삭제 작업을 시작할게요.
[23-07-06_15:38:37] [INFO] 1 번째 반복문이 시작되었어요. Sub의 기존 Docker Container 포함한 중지 및 삭제 명령어에 필요한 변수를 설정할게요.
[23-07-06_15:38:37] [INFO] 컨테이너 이름을 통해 docker 기동 명령어 변수 정보 : 
[23-07-06_15:38:37] [INFO] 컨테이너 이름 및 Host Name : giggal-total-back-office-api-sub 
[23-07-06_15:38:37] [INFO] giggal-total-back-office-api-sub 컨테이너 Port Number : 1011 
[23-07-06_15:38:37] [INFO] giggal-total-back-office-api-sub 컨테이너 Docker Image Name : giggal-people/total-back-office-api 
[23-07-06_15:38:37] [INFO] 종료 및 제거할 기존 컨테이너 이름 : giggal-total-back-office-api-sub 
[23-07-06_15:38:37] [INFO] giggal-total-back-office-api-sub 컨테이너 ID : 25bcd3a28fd6 
giggal-total-back-office-api-sub
[23-07-06_15:38:37] [INFO] 기존 동작 중이던 Container 이름: giggal-total-back-office-api-sub, Container ID: 25bcd3a28fd6 종료 작업 성공 하였어요.
[23-07-06_15:38:37] [INFO] 기존 동작 중이던 Container 이름: giggal-total-back-office-api-sub, Container ID: 25bcd3a28fd6 삭제 작업 진행할게요.
giggal-total-back-office-api-sub
[23-07-06_15:38:37] [INFO] 기존 동작 중이던 Container 이름: giggal-total-back-office-api-sub, Container ID: 25bcd3a28fd6 삭제 작업 성공 하였어요.
[23-07-06_15:38:37] [INFO] giggal-total-back-office-api-sub 컨테이너 이름을 통해 docker 기동 명령어 변수를 설정할게요.
[23-07-06_15:38:37] [INFO] 설정된 변수 정보: 
[23-07-06_15:38:37] [INFO] Container Name And Container Host Name : giggal-total-back-office-api-sub 
[23-07-06_15:38:37] [INFO] Container Port Number : 1011 
264e5299a899e7891871bfec08e17364c5b2efe7f3a48f0bc691e82516af8b8b
[23-07-06_15:38:37] [INFO] docker run -itd --privileged --name giggal-total-back-office-api-sub --hostname giggal-total-back-office-api-sub -e container=docker -p 1011:8080 --restart unless-stopped giggal-people/total-back-office-api 명령어 작업 성공하였어요.
[23-07-06_15:38:37] [INFO] Container ID : 264e5299a899 
[23-07-06_15:38:37] [INFO] 기동 시킨 Container giggal-total-back-office-api-sub (ID: 264e5299a899) 동작 상태 확인할게요.
[23-07-06_15:38:37] [INFO] 기동 시킨 Container 내부 Log 정보 : 
[23-07-06_15:38:37] [INFO]  [92m
 .----------------. .----------------. .----------------. .----------------. .----------------. .----------------. .----------------. .----------------. .----------------. .----------------. .----------------. .----------------. .----------------. .----------------. .----------------. .----------------. .----------------. .----------------. .----------------. .----------------. .----------------. .----------------. .----------------. .----------------. .----------------. .----------------. .----------------. .----------------. .----------------. .-----------------..----------------. .----------------. .----------------. .----------------. .----------------. .----------------. .----------------. .----------------. .----------------.
| .--------------. | .--------------. | .--------------. | .--------------. | .--------------. | .--------------. | .--------------. | .--------------. | .--------------. | .--------------. | .--------------. | .--------------. | .--------------. | .--------------. | .--------------. | .--------------. | .--------------. | .--------------. | .--------------. | .--------------. | .--------------. | .--------------. | .--------------. | .--------------. | .--------------. | .--------------. | .--------------. | .--------------. | .--------------. | .--------------. | .--------------. | .--------------. | .--------------. | .--------------. | .--------------. | .--------------. | .--------------. | .--------------. | .--------------. |
| |    ______    | | |     _____    | | |    ______    | | |    ______    | | |      __      | | |   _____      | | |   ______     | | |  _________   | | |     ____     | | |   ______     | | |   _____      | | |  _________   | | |              | | |   ______     | | |      __      | | |     ______   | | |  ___  ____   | | |     ____     | | |  _________   | | |  _________   | | |     _____    | | |     ______   | | |  _________   | | |              | | |   ______     | | |      __      | | |     ______   | | |  ___  ____   | | |  _________   | | | ____  _____  | | |  ________    | | |              | | |   ______     | | |  _______     | | |     ____     | | |     _____    | | |  _________   | | |     ______   | | |  _________   | |
| |  .' ___  |   | | |    |_   _|   | | |  .' ___  |   | | |  .' ___  |   | | |     /  \     | | |  |_   _|     | | |  |_   __ \   | | | |_   ___  |  | | |   .'    `.   | | |  |_   __ \   | | |  |_   _|     | | | |_   ___  |  | | |              | | |  |_   _ \    | | |     /  \     | | |   .' ___  |  | | | |_  ||_  _|  | | |   .'    `.   | | | |_   ___  |  | | | |_   ___  |  | | |    |_   _|   | | |   .' ___  |  | | | |_   ___  |  | | |              | | |  |_   _ \    | | |     /  \     | | |   .' ___  |  | | | |_  ||_  _|  | | | |_   ___  |  | | ||_   \|_   _| | | | |_   ___ `.  | | |              | | |  |_   __ \   | | | |_   __ \    | | |   .'    `.   | | |    |_   _|   | | | |_   ___  |  | | |   .' ___  |  | | | |  _   _  |  | |
| | / .'   \_|   | | |      | |     | | | / .'   \_|   | | | / .'   \_|   | | |    / /\ \    | | |    | |       | | |    | |__) |  | | |   | |_  \_|  | | |  /  .--.  \  | | |    | |__) |  | | |    | |       | | |   | |_  \_|  | | |              | | |    | |_) |   | | |    / /\ \    | | |  / .'   \_|  | | |   | |_/ /    | | |  /  .--.  \  | | |   | |_  \_|  | | |   | |_  \_|  | | |      | |     | | |  / .'   \_|  | | |   | |_  \_|  | | |              | | |    | |_) |   | | |    / /\ \    | | |  / .'   \_|  | | |   | |_/ /    | | |   | |_  \_|  | | |  |   \ | |   | | |   | |   `. \ | | |              | | |    | |__) |  | | |   | |__) |   | | |  /  .--.  \  | | |      | |     | | |   | |_  \_|  | | |  / .'   \_|  | | | |_/ | | \_|  | |
| | | |    ____  | | |      | |     | | | | |    ____  | | | | |    ____  | | |   / ____ \   | | |    | |   _   | | |    |  ___/   | | |   |  _|  _   | | |  | |    | |  | | |    |  ___/   | | |    | |   _   | | |   |  _|  _   | | |              | | |    |  __'.   | | |   / ____ \   | | |  | |         | | |   |  __'.    | | |  | |    | |  | | |   |  _|      | | |   |  _|      | | |      | |     | | |  | |         | | |   |  _|  _   | | |              | | |    |  __'.   | | |   / ____ \   | | |  | |         | | |   |  __'.    | | |   |  _|  _   | | |  | |\ \| |   | | |   | |    | | | | |              | | |    |  ___/   | | |   |  __ /    | | |  | |    | |  | | |   _  | |     | | |   |  _|  _   | | |  | |         | | |     | |      | |
| | \ `.___]  _| | | |     _| |_    | | | \ `.___]  _| | | | \ `.___]  _| | | | _/ /    \ \_ | | |   _| |__/ |  | | |   _| |_      | | |  _| |___/ |  | | |  \  `--'  /  | | |   _| |_      | | |   _| |__/ |  | | |  _| |___/ |  | | |              | | |   _| |__) |  | | | _/ /    \ \_ | | |  \ `.___.'\  | | |  _| |  \ \_  | | |  \  `--'  /  | | |  _| |_       | | |  _| |_       | | |     _| |_    | | |  \ `.___.'\  | | |  _| |___/ |  | | |              | | |   _| |__) |  | | | _/ /    \ \_ | | |  \ `.___.'\  | | |  _| |  \ \_  | | |  _| |___/ |  | | | _| |_\   |_  | | |  _| |___.' / | | |              | | |   _| |_      | | |  _| |  \ \_  | | |  \  `--'  /  | | |  | |_' |     | | |  _| |___/ |  | | |  \ `.___.'\  | | |    _| |_     | |
| |  `._____.'   | | |    |_____|   | | |  `._____.'   | | |  `._____.'   | | ||____|  |____|| | |  |________|  | | |  |_____|     | | | |_________|  | | |   `.____.'   | | |  |_____|     | | |  |________|  | | | |_________|  | | |   _______    | | |  |_______/   | | ||____|  |____|| | |   `._____.'  | | | |____||____| | | |   `.____.'   | | | |_____|      | | | |_____|      | | |    |_____|   | | |   `._____.'  | | | |_________|  | | |   _______    | | |  |_______/   | | ||____|  |____|| | |   `._____.'  | | | |____||____| | | | |_________|  | | ||_____|\____| | | | |________.'  | | |   _______    | | |  |_____|     | | | |____| |___| | | |   `.____.'   | | |  `.___.'     | | | |_________|  | | |   `._____.'  | | |   |_____|    | |
| |              | | |              | | |              | | |              | | |              | | |              | | |              | | |              | | |              | | |              | | |              | | |              | | |  |_______|   | | |              | | |              | | |              | | |              | | |              | | |              | | |              | | |              | | |              | | |              | | |  |_______|   | | |              | | |              | | |              | | |              | | |              | | |              | | |              | | |  |_______|   | | |              | | |              | | |              | | |              | | |              | | |              | | |              | |
| '--------------' | '--------------' | '--------------' | '--------------' | '--------------' | '--------------' | '--------------' | '--------------' | '--------------' | '--------------' | '--------------' | '--------------' | '--------------' | '--------------' | '--------------' | '--------------' | '--------------' | '--------------' | '--------------' | '--------------' | '--------------' | '--------------' | '--------------' | '--------------' | '--------------' | '--------------' | '--------------' | '--------------' | '--------------' | '--------------' | '--------------' | '--------------' | '--------------' | '--------------' | '--------------' | '--------------' | '--------------' | '--------------' | '--------------' |
 '----------------' '----------------' '----------------' '----------------' '----------------' '----------------' '----------------' '----------------' '----------------' '----------------' '----------------' '----------------' '----------------' '----------------' '----------------' '----------------' '----------------' '----------------' '----------------' '----------------' '----------------' '----------------' '----------------' '----------------' '----------------' '----------------' '----------------' '----------------' '----------------' '----------------' '----------------' '----------------' '----------------' '----------------' '----------------' '----------------' '----------------' '----------------' '----------------'
[91m
 
Powered by Spring Boot 2.7.7
[32m
[23-07-06_15:38:37] [INFO] docker ps --filter id=264e5299a899 --format {{.Status}}  명령어 작업 성공하였어요.
[23-07-06_15:38:37] [INFO] 2 번째 반복문이 시작되었어요. Main의 기존 Docker Container 포함한 중지 및 삭제 명령어에 필요한 변수를 설정할게요.
[23-07-06_15:38:37] [INFO] 컨테이너 이름을 통해 docker 기동 명령어 변수 정보 : 
[23-07-06_15:38:37] [INFO] 컨테이너 이름 및 Host Name : giggal-total-back-office-api-main 
[23-07-06_15:38:37] [INFO] giggal-total-back-office-api-main 컨테이너 Port Number : 1001 
[23-07-06_15:38:37] [INFO] giggal-total-back-office-api-main 컨테이너 Docker Image Name : giggal-people/total-back-office-api 
[23-07-06_15:38:37] [INFO] 종료 및 제거할 기존 컨테이너 이름 : giggal-total-back-office-api-main 
[23-07-06_15:38:37] [INFO] giggal-total-back-office-api-main 컨테이너 ID : 2649f9891d74 
giggal-total-back-office-api-main
[23-07-06_15:38:37] [INFO] 기존 동작 중이던 Container 이름: giggal-total-back-office-api-main, Container ID: 2649f9891d74 종료 작업 성공 하였어요.
[23-07-06_15:38:37] [INFO] 기존 동작 중이던 Container 이름: giggal-total-back-office-api-main, Container ID: 2649f9891d74 삭제 작업 진행할게요.
giggal-total-back-office-api-main
[23-07-06_15:38:37] [INFO] 기존 동작 중이던 Container 이름: giggal-total-back-office-api-main, Container ID: 2649f9891d74 삭제 작업 성공 하였어요.
[23-07-06_15:38:37] [INFO] giggal-total-back-office-api-main 컨테이너 이름을 통해 docker 기동 명령어 변수를 설정할게요.
[23-07-06_15:38:37] [INFO] 설정된 변수 정보: 
[23-07-06_15:38:37] [INFO] Container Name And Container Host Name : giggal-total-back-office-api-main 
[23-07-06_15:38:37] [INFO] Container Port Number : 1001 
3447d38c72aa3f607344b30ef50f881d53560d0ba75ef995ebcbf959a9087da1
[23-07-06_15:38:37] [INFO] docker run -itd --privileged --name giggal-total-back-office-api-main --hostname giggal-total-back-office-api-main -e container=docker -p 1001:8080 --restart unless-stopped giggal-people/total-back-office-api 명령어 작업 성공하였어요.
[23-07-06_15:38:37] [INFO] Container ID : 3447d38c72aa 
[23-07-06_15:38:37] [INFO] 기동 시킨 Container giggal-total-back-office-api-main (ID: 3447d38c72aa) 동작 상태 확인할게요.
[23-07-06_15:38:37] [INFO] 기동 시킨 Container 내부 Log 정보 : 
[23-07-06_15:38:37] [INFO]  [92m
 .----------------. .----------------. .----------------. .----------------. .----------------. .----------------. .----------------. .----------------. .----------------. .----------------. .----------------. .----------------. .----------------. .----------------. .----------------. .----------------. .----------------. .----------------. .----------------. .----------------. .----------------. .----------------. .----------------. .----------------. .----------------. .----------------. .----------------. .----------------. .----------------. .-----------------..----------------. .----------------. .----------------. .----------------. .----------------. .----------------. .----------------. .----------------. .----------------.
| .--------------. | .--------------. | .--------------. | .--------------. | .--------------. | .--------------. | .--------------. | .--------------. | .--------------. | .--------------. | .--------------. | .--------------. | .--------------. | .--------------. | .--------------. | .--------------. | .--------------. | .--------------. | .--------------. | .--------------. | .--------------. | .--------------. | .--------------. | .--------------. | .--------------. | .--------------. | .--------------. | .--------------. | .--------------. | .--------------. | .--------------. | .--------------. | .--------------. | .--------------. | .--------------. | .--------------. | .--------------. | .--------------. | .--------------. |
| |    ______    | | |     _____    | | |    ______    | | |    ______    | | |      __      | | |   _____      | | |   ______     | | |  _________   | | |     ____     | | |   ______     | | |   _____      | | |  _________   | | |              | | |   ______     | | |      __      | | |     ______   | | |  ___  ____   | | |     ____     | | |  _________   | | |  _________   | | |     _____    | | |     ______   | | |  _________   | | |              | | |   ______     | | |      __      | | |     ______   | | |  ___  ____   | | |  _________   | | | ____  _____  | | |  ________    | | |              | | |   ______     | | |  _______     | | |     ____     | | |     _____    | | |  _________   | | |     ______   | | |  _________   | |
| |  .' ___  |   | | |    |_   _|   | | |  .' ___  |   | | |  .' ___  |   | | |     /  \     | | |  |_   _|     | | |  |_   __ \   | | | |_   ___  |  | | |   .'    `.   | | |  |_   __ \   | | |  |_   _|     | | | |_   ___  |  | | |              | | |  |_   _ \    | | |     /  \     | | |   .' ___  |  | | | |_  ||_  _|  | | |   .'    `.   | | | |_   ___  |  | | | |_   ___  |  | | |    |_   _|   | | |   .' ___  |  | | | |_   ___  |  | | |              | | |  |_   _ \    | | |     /  \     | | |   .' ___  |  | | | |_  ||_  _|  | | | |_   ___  |  | | ||_   \|_   _| | | | |_   ___ `.  | | |              | | |  |_   __ \   | | | |_   __ \    | | |   .'    `.   | | |    |_   _|   | | | |_   ___  |  | | |   .' ___  |  | | | |  _   _  |  | |
| | / .'   \_|   | | |      | |     | | | / .'   \_|   | | | / .'   \_|   | | |    / /\ \    | | |    | |       | | |    | |__) |  | | |   | |_  \_|  | | |  /  .--.  \  | | |    | |__) |  | | |    | |       | | |   | |_  \_|  | | |              | | |    | |_) |   | | |    / /\ \    | | |  / .'   \_|  | | |   | |_/ /    | | |  /  .--.  \  | | |   | |_  \_|  | | |   | |_  \_|  | | |      | |     | | |  / .'   \_|  | | |   | |_  \_|  | | |              | | |    | |_) |   | | |    / /\ \    | | |  / .'   \_|  | | |   | |_/ /    | | |   | |_  \_|  | | |  |   \ | |   | | |   | |   `. \ | | |              | | |    | |__) |  | | |   | |__) |   | | |  /  .--.  \  | | |      | |     | | |   | |_  \_|  | | |  / .'   \_|  | | | |_/ | | \_|  | |
| | | |    ____  | | |      | |     | | | | |    ____  | | | | |    ____  | | |   / ____ \   | | |    | |   _   | | |    |  ___/   | | |   |  _|  _   | | |  | |    | |  | | |    |  ___/   | | |    | |   _   | | |   |  _|  _   | | |              | | |    |  __'.   | | |   / ____ \   | | |  | |         | | |   |  __'.    | | |  | |    | |  | | |   |  _|      | | |   |  _|      | | |      | |     | | |  | |         | | |   |  _|  _   | | |              | | |    |  __'.   | | |   / ____ \   | | |  | |         | | |   |  __'.    | | |   |  _|  _   | | |  | |\ \| |   | | |   | |    | | | | |              | | |    |  ___/   | | |   |  __ /    | | |  | |    | |  | | |   _  | |     | | |   |  _|  _   | | |  | |         | | |     | |      | |
| | \ `.___]  _| | | |     _| |_    | | | \ `.___]  _| | | | \ `.___]  _| | | | _/ /    \ \_ | | |   _| |__/ |  | | |   _| |_      | | |  _| |___/ |  | | |  \  `--'  /  | | |   _| |_      | | |   _| |__/ |  | | |  _| |___/ |  | | |              | | |   _| |__) |  | | | _/ /    \ \_ | | |  \ `.___.'\  | | |  _| |  \ \_  | | |  \  `--'  /  | | |  _| |_       | | |  _| |_       | | |     _| |_    | | |  \ `.___.'\  | | |  _| |___/ |  | | |              | | |   _| |__) |  | | | _/ /    \ \_ | | |  \ `.___.'\  | | |  _| |  \ \_  | | |  _| |___/ |  | | | _| |_\   |_  | | |  _| |___.' / | | |              | | |   _| |_      | | |  _| |  \ \_  | | |  \  `--'  /  | | |  | |_' |     | | |  _| |___/ |  | | |  \ `.___.'\  | | |    _| |_     | |
| |  `._____.'   | | |    |_____|   | | |  `._____.'   | | |  `._____.'   | | ||____|  |____|| | |  |________|  | | |  |_____|     | | | |_________|  | | |   `.____.'   | | |  |_____|     | | |  |________|  | | | |_________|  | | |   _______    | | |  |_______/   | | ||____|  |____|| | |   `._____.'  | | | |____||____| | | |   `.____.'   | | | |_____|      | | | |_____|      | | |    |_____|   | | |   `._____.'  | | | |_________|  | | |   _______    | | |  |_______/   | | ||____|  |____|| | |   `._____.'  | | | |____||____| | | | |_________|  | | ||_____|\____| | | | |________.'  | | |   _______    | | |  |_____|     | | | |____| |___| | | |   `.____.'   | | |  `.___.'     | | | |_________|  | | |   `._____.'  | | |   |_____|    | |
| |              | | |              | | |              | | |              | | |              | | |              | | |              | | |              | | |              | | |              | | |              | | |              | | |  |_______|   | | |              | | |              | | |              | | |              | | |              | | |              | | |              | | |              | | |              | | |              | | |  |_______|   | | |              | | |              | | |              | | |              | | |              | | |              | | |              | | |  |_______|   | | |              | | |              | | |              | | |              | | |              | | |              | | |              | |
| '--------------' | '--------------' | '--------------' | '--------------' | '--------------' | '--------------' | '--------------' | '--------------' | '--------------' | '--------------' | '--------------' | '--------------' | '--------------' | '--------------' | '--------------' | '--------------' | '--------------' | '--------------' | '--------------' | '--------------' | '--------------' | '--------------' | '--------------' | '--------------' | '--------------' | '--------------' | '--------------' | '--------------' | '--------------' | '--------------' | '--------------' | '--------------' | '--------------' | '--------------' | '--------------' | '--------------' | '--------------' | '--------------' | '--------------' |
 '----------------' '----------------' '----------------' '----------------' '----------------' '----------------' '----------------' '----------------' '----------------' '----------------' '----------------' '----------------' '----------------' '----------------' '----------------' '----------------' '----------------' '----------------' '----------------' '----------------' '----------------' '----------------' '----------------' '----------------' '----------------' '----------------' '----------------' '----------------' '----------------' '----------------' '----------------' '----------------' '----------------' '----------------' '----------------' '----------------' '----------------' '----------------' '----------------'
[91m
 
Powered by Spring Boot 2.7.7
[32m
[23-07-06_15:38:37] [INFO] docker ps --filter id=3447d38c72aa --format {{.Status}}  명령어 작업 성공하였어요.
[23-07-06_15:38:37] [INFO] 기깔나는 사람들 통합 관리 서버 API 무중단 배포 서버 작업 중 새로운 Application Docker Container 기동 작업이 끝났어요.
[23-07-06_15:38:37] [INFO] 기깔나는 사람들 통합 관리 서버 API 무중단 배포 LOG 위치 : /var/log/deploy/giggal-total-back-office
[23-07-06_15:38:37] [INFO] 현재 운영 중인 Docker Container 정보 : 
[23-07-06_15:38:37] [INFO] CONTAINER ID   IMAGE                                 COMMAND                  CREATED          STATUS          PORTS                                       NAMES
3447d38c72aa   giggal-people/total-back-office-api   "java -jar -Dspring.…"   7 seconds ago    Up 5 seconds    0.0.0.0:1001->8080/tcp, :::1001->8080/tcp   giggal-total-back-office-api-main
264e5299a899   giggal-people/total-back-office-api   "java -jar -Dspring.…"   26 seconds ago   Up 24 seconds   0.0.0.0:1011->8080/tcp, :::1011->8080/tcp   giggal-total-back-office-api-sub 
=====================================================================================================

=====================================================================================================
[23-07-06_15:39:17] [INFO] 기깔나는 사람들 통합 관리 서버 API 무중단 배포 서버 작업 중 Application Health Check 작업이 시작 되었어요.
======================================[23-07-06_15:39:17] 통합 백 오피스 api Application Health Check======================================
[23-07-06_15:39:17] [INFO] Author(만든이): 주니(junyharang8592@gmail.com)
[23-07-06_15:39:17] [INFO] LOG Directory 존재 합니다.
[23-07-06_15:39:17] [INFO] Application Container 기동 상태 확인할게요.
[23-07-06_15:39:17] [INFO] Application Container MAIN 기동 상태 정보 : Up 15 seconds
[23-07-06_15:39:17] [INFO] Application Container SUB 기동 상태 정보 : Up 34 seconds
[23-07-06_15:39:17] [INFO] 1 번째 Application Container 기동 상태 확인
[23-07-06_15:39:17] [INFO] Application Container MAIN PORT 번호 : 1001
[23-07-06_15:39:17] [INFO] Application Container SUB PORT 번호 : 1011
[23-07-06_15:39:17] [INFO] 1 번째 반복문을 통해 Application Container MAIN 기동 상태가 정상임을 확인하였어요.
[23-07-06_15:39:17] [INFO] giggal-total-back-office-api-sub Health Check 시작할게요.
[23-07-06_15:39:17] [INFO] 사용 명령어: curl -I http://192.168.20.12:1011/api/test/profile | grep -oP 'HTTP/1.1 \K\d+' 
[23-07-06_15:39:17] [INFO] 1 번째 및 http 정상 연결 확인 1 번째 Health Check 작업 시작 되었어요.
  % Total    % Received % Xferd  Average Speed   Time    Time     Time  Current
                                 Dload  Upload   Total   Spent    Left  Speed

  0     0    0     0    0     0      0      0 --:--:-- --:--:-- --:--:--     0
  0     4    0     0    0     0      0      0 --:--:-- --:--:-- --:--:--     0
  0     4    0     0    0     0      0      0 --:--:-- --:--:-- --:--:--     0
[23-07-06_15:39:17] [INFO] curl -I http://192.168.20.12:1011/api/test/profile | grep -oP 'HTTP/1.1 \K\d+' 명령어 작업 성공하였어요.
  % Total    % Received % Xferd  Average Speed   Time    Time     Time  Current
                                 Dload  Upload   Total   Spent    Left  Speed

  0     0    0     0    0     0      0      0 --:--:-- --:--:-- --:--:--     0
  0     4    0     0    0     0      0      0 --:--:-- --:--:-- --:--:--     0
[23-07-06_15:39:17] [INFO] giggal-total-back-office-api-sub Container 상태가 정상이에요.
[23-07-06_15:39:17] [INFO] curl -I http://192.168.20.12:1011/api/test/profile | grep HTTP | wc -l 명령어 작업 성공하였어요.
[23-07-06_15:39:17] [INFO] Application Container 기동 상태 확인할게요.
[23-07-06_15:39:17] [INFO] Application Container MAIN 기동 상태 정보 : Up 21 seconds
[23-07-06_15:39:17] [INFO] Application Container SUB 기동 상태 정보 : Up 40 seconds
[23-07-06_15:39:17] [INFO] 2 번째 Application Container 기동 상태 확인
[23-07-06_15:39:17] [INFO] Application Container MAIN PORT 번호 : 1001
[23-07-06_15:39:17] [INFO] Application Container SUB PORT 번호 : 1011
[23-07-06_15:39:17] [INFO] 2 번째 반복문을 통해 Application Container SUB 기동 상태가 정상임을 확인하였어요.
[23-07-06_15:39:17] [INFO] giggal-total-back-office-api-main Health Check 시작할게요.
[23-07-06_15:39:17] [INFO] 사용 명령어: curl -I http://192.168.20.12:1001/api/test/profile | grep -oP 'HTTP/1.1 \K\d+' 
[23-07-06_15:39:17] [INFO] 2 번째 및 http 정상 연결 확인 1 번째 Health Check 작업 시작 되었어요.
  % Total    % Received % Xferd  Average Speed   Time    Time     Time  Current
                                 Dload  Upload   Total   Spent    Left  Speed

  0     0    0     0    0     0      0      0 --:--:-- --:--:-- --:--:--     0
  0     4    0     0    0     0      0      0 --:--:-- --:--:-- --:--:--     0
  0     4    0     0    0     0      0      0 --:--:-- --:--:-- --:--:--     0
[23-07-06_15:39:17] [INFO] curl -I http://192.168.20.12:1001/api/test/profile | grep -oP 'HTTP/1.1 \K\d+' 명령어 작업 성공하였어요.
  % Total    % Received % Xferd  Average Speed   Time    Time     Time  Current
                                 Dload  Upload   Total   Spent    Left  Speed

  0     0    0     0    0     0      0      0 --:--:-- --:--:-- --:--:--     0
  0     4    0     0    0     0      0      0 --:--:-- --:--:-- --:--:--     0
[23-07-06_15:39:17] [INFO] giggal-total-back-office-api-main Container 상태가 정상이에요.
[23-07-06_15:39:17] [INFO] curl -I http://192.168.20.12:1001/api/test/profile | grep HTTP | wc -l 명령어 작업 성공하였어요.
[23-07-06_15:39:17] [INFO] 기깔나는 사람들 통합 관리 서버 API 무중단 배포 작업 중 Application Health Check 작업이 끝났어요.
[23-07-06_15:39:17] [INFO] 기깔나는 사람들 통합 관리 서버 API 무중단 배포 LOG 위치 : /var/log/deploy/giggal-total-back-office
[23-07-06_15:39:17] [INFO] 현재 운영 중인 Docker Container 정보 : 
[23-07-06_15:39:17] [INFO] CONTAINER ID   IMAGE                                 COMMAND                  CREATED          STATUS          PORTS                                       NAMES
3447d38c72aa   giggal-people/total-back-office-api   "java -jar -Dspring.…"   29 seconds ago   Up 27 seconds   0.0.0.0:1001->8080/tcp, :::1001->8080/tcp   giggal-total-back-office-api-main
264e5299a899   giggal-people/total-back-office-api   "java -jar -Dspring.…"   48 seconds ago   Up 46 seconds   0.0.0.0:1011->8080/tcp, :::1011->8080/tcp   giggal-total-back-office-api-sub 
=====================================================================================================

[23-07-06_15:38:32] [INFO] 기깔나는 사람들 통합 관리 서버 API 무중단 배포 작업 중 Application Docker Container 존재 여부 확인 작업이 끝났어요.
[23-07-06_15:38:32] [INFO] 기깔나는 사람들 통합 관리 서버 API 무중단 배포 LOG 위치 : /var/log/deploy/giggal-total-back-office
[23-07-06_15:38:32] [INFO] 현재 운영 중인 Docker Container 정보 : 
[23-07-06_15:38:32] [INFO] CONTAINER ID   IMAGE                                 COMMAND                  CREATED          STATUS          PORTS                                       NAMES
3447d38c72aa   giggal-people/total-back-office-api   "java -jar -Dspring.…"   30 seconds ago   Up 27 seconds   0.0.0.0:1001->8080/tcp, :::1001->8080/tcp   giggal-total-back-office-api-main
264e5299a899   giggal-people/total-back-office-api   "java -jar -Dspring.…"   49 seconds ago   Up 46 seconds   0.0.0.0:1011->8080/tcp, :::1011->8080/tcp   giggal-total-back-office-api-sub 
=====================================================================================================

SSH: EXEC: completed after 67,464 ms
SSH: Disconnecting configuration [op-total-back-office-was] ...
SSH: Transferred 0 file(s)
[Pipeline] echo
운영 환경 Application Docker 관련 작업 소요 시간 : 68.048 초
[Pipeline] }
[Pipeline] // script
Post stage
[Pipeline] script
[Pipeline] {
[Pipeline] discordSend
Sending notification to Discord.
[Pipeline] }
[Pipeline] // script
[Pipeline] }
[Pipeline] // stage
[Pipeline] stage
[Pipeline] { (운영 환경 DMZ 서버 NGINX 관련 File 전달 및 스크립트 실행 권한 부여)
[Pipeline] script
[Pipeline] {
[Pipeline] sshPublisher
SSH: Connecting from host [23565769b6a7]
SSH: Connecting with configuration [op-total-back-office-nginx] ...
SSH: Creating session: username [cicd-admin], hostname [192.168.30.3], port [9,998]
SSH: Connecting session ...
SSH: Connected
SSH: Opening SFTP channel ...
SSH: SFTP channel open
SSH: Connecting SFTP channel ...
SSH: Connected
SSH: cd [/data/deploy/giggal-total-back-office]
SSH: OK
SSH: Opening exec channel ...
SSH: EXEC: channel open
SSH: EXEC: STDOUT/STDERR from command [rm -rf *;] ...
SSH: EXEC: connected
SSH: EXEC: completed after 201 ms
SSH: cd [/data/deploy/giggal-total-back-office]
SSH: OK
SSH: cd [deploy/prod/nginx/config/conf.d]
SSH: OK
SSH: put [default.conf]
SSH: OK
SSH: cd [/data/deploy/giggal-total-back-office]
SSH: OK
SSH: cd [deploy/prod/nginx/config]
SSH: OK
SSH: put [error.html]
SSH: OK
SSH: put [nginx.conf]
SSH: OK
SSH: cd [/data/deploy/giggal-total-back-office]
SSH: OK
SSH: cd [deploy/prod/nginx/shell-script]
SSH: OK
SSH: put [nginxContainerExistenceStatusCheck.sh]
SSH: OK
SSH: put [nginxDockerContainerRun.sh]
SSH: OK
SSH: put [nginxHealthCheck.sh]
SSH: OK
SSH: put [nginxServiceSetting.sh]
SSH: OK
SSH: Opening exec channel ...
SSH: EXEC: channel open
SSH: EXEC: STDOUT/STDERR from command [chmod +x /data/deploy/giggal-total-back-office/deploy/prod/nginx/shell-script/nginxContainerExistenceStatusCheck.sh;                                                                           chmod +x /data/deploy/giggal-total-back-office/deploy/prod/nginx/shell-script/nginxDockerContainerRun.sh;                                                                           chmod +x /data/deploy/giggal-total-back-office/deploy/prod/nginx/shell-script/nginxServiceSetting.sh;                                                                           chmod +x /data/deploy/giggal-total-back-office/deploy/prod/nginx/shell-script/nginxHealthCheck.sh] ...
SSH: EXEC: connected
SSH: EXEC: completed after 201 ms
SSH: Disconnecting configuration [op-total-back-office-nginx] ...
SSH: Transferred 7 ( 0 + 7 ) file(s)
[Pipeline] echo
운영 환경 DMZ 서버 NGINX 관련 File 전달 및 스크립트 실행 권한 부여 작업 소요 시간 : 1.47 초
[Pipeline] }
[Pipeline] // script
Post stage
[Pipeline] script
[Pipeline] {
[Pipeline] discordSend
Sending notification to Discord.
[Pipeline] }
[Pipeline] // script
[Pipeline] }
[Pipeline] // stage
[Pipeline] stage
[Pipeline] { (운영 환경 DMZ 서버 NGINX Docker 관련 작업)
[Pipeline] script
[Pipeline] {
[Pipeline] sshPublisher
SSH: Connecting from host [23565769b6a7]
SSH: Connecting with configuration [op-total-back-office-nginx] ...
SSH: Creating session: username [cicd-admin], hostname [192.168.30.3], port [9,998]
SSH: Connecting session ...
SSH: Connected
SSH: Opening exec channel ...
SSH: EXEC: channel open
SSH: EXEC: STDOUT/STDERR from command [/data/deploy/giggal-total-back-office/deploy/prod/nginx/shell-script/nginxContainerExistenceStatusCheck.sh] ...
SSH: EXEC: connected
[23-07-06_06:39:46] [INFO] 기깔나는 사람들 통합 관리 서버 API 무중단 배포 서버 작업 중 NGINX Docker Container 존재 여부 확인 작업이 시작 되었어요.
======================================[23-07-06_06:39:46] 통합 백 오피스 api NGINX Docker Container 존재 여부 확인======================================
[23-07-06_06:39:46] [INFO] Author(만든이): 주니(junyharang8592@gmail.com)
[23-07-06_06:39:46] [INFO] LOG Directory 존재 합니다.
[23-07-06_06:39:46] [INFO] nginx-total-back-office 컨테이너 존재 여부 확인할게요.
[23-07-06_06:39:46] [INFO] nginx-total-back-office Container 존재하지 않아요.
=====================================================================================================
[23-07-06_06:39:51] [INFO] 기깔나는 사람들 통합 관리 서버 API 무중단 배포 서버 작업 중 Nginx Docker Container 기동 작업이 시작 되었어요.
======================================[23-07-06_06:39:51] 통합 백 오피스 api  Nginx Docker Container 기동 작업======================================
[23-07-06_06:39:51] [INFO] Author(만든이): 주니(junyharang8592@gmail.com)
[23-07-06_06:39:51] [INFO] LOG Directory 존재 합니다.
[23-07-06_06:39:51] [INFO] Nginx Container 기동 할게요.
Unable to find image 'nginx:latest' locally
latest: Pulling from library/nginx
faef57eae888: Pulling fs layer
76579e9ed380: Pulling fs layer
cf707e233955: Pulling fs layer
91bb7937700d: Pulling fs layer
4b962717ba55: Pulling fs layer
f46d7b05649a: Pulling fs layer
103501419a0a: Pulling fs layer
91bb7937700d: Waiting
4b962717ba55: Waiting
f46d7b05649a: Waiting
103501419a0a: Waiting
cf707e233955: Verifying Checksum
cf707e233955: Download complete
91bb7937700d: Verifying Checksum
91bb7937700d: Download complete
faef57eae888: Verifying Checksum
faef57eae888: Download complete
4b962717ba55: Verifying Checksum
4b962717ba55: Download complete
76579e9ed380: Verifying Checksum
76579e9ed380: Download complete
f46d7b05649a: Verifying Checksum
f46d7b05649a: Download complete
103501419a0a: Verifying Checksum
103501419a0a: Download complete
faef57eae888: Pull complete
76579e9ed380: Pull complete
cf707e233955: Pull complete
91bb7937700d: Pull complete
4b962717ba55: Pull complete
f46d7b05649a: Pull complete
103501419a0a: Pull complete
Digest: sha256:08bc36ad52474e528cc1ea3426b5e3f4bad8a130318e3140d6cfe29c8892c7ef
Status: Downloaded newer image for nginx:latest
[23-07-06_06:39:51] [INFO] docker run -itd --privileged --name nginx-total-back-office --hostname nginx-total-back-office -e container=docker -p 1000:80 --restart unless-stopped nginx:latest 명령어 작업 성공하였어요.
[23-07-06_06:39:51] [INFO] nginx-total-back-office 기동 여부를 확인할게요.
[23-07-06_06:39:51] [INFO] nginx-total-back-office 기동 여부 확인 대상 Container ID : a17bdd4c1fe3 
[23-07-06_06:39:51] [INFO] nginx-total-back-office Container 기동 중이에요.
[23-07-06_06:39:51] [INFO] 기동 시킨 Container 내부 Log 정보 : 
[23-07-06_06:39:51] [INFO] /docker-entrypoint.sh: /docker-entrypoint.d/ is not empty, will attempt to perform configuration
/docker-entrypoint.sh: Looking for shell scripts in /docker-entrypoint.d/
/docker-entrypoint.sh: Launching /docker-entrypoint.d/10-listen-on-ipv6-by-default.sh
10-listen-on-ipv6-by-default.sh: info: Getting the checksum of /etc/nginx/conf.d/default.conf
10-listen-on-ipv6-by-default.sh: info: Enabled listen on IPv6 in /etc/nginx/conf.d/default.conf
/docker-entrypoint.sh: Sourcing /docker-entrypoint.d/15-local-resolvers.envsh
/docker-entrypoint.sh: Launching /docker-entrypoint.d/20-envsubst-on-templates.sh
/docker-entrypoint.sh: Launching /docker-entrypoint.d/30-tune-worker-processes.sh
/docker-entrypoint.sh: Configuration complete; ready for start up
2023/07/06 06:40:07 [notice] 1#1: using the "epoll" event method
2023/07/06 06:40:07 [notice] 1#1: nginx/1.25.1
2023/07/06 06:40:07 [notice] 1#1: built by gcc 12.2.0 (Debian 12.2.0-14) 
2023/07/06 06:40:07 [notice] 1#1: OS: Linux 5.4.0-153-generic
2023/07/06 06:40:07 [notice] 1#1: getrlimit(RLIMIT_NOFILE): 1048576:1048576
2023/07/06 06:40:07 [notice] 1#1: start worker processes
2023/07/06 06:40:07 [notice] 1#1: start worker process 28
2023/07/06 06:40:07 [notice] 1#1: start worker process 29
=====================================================================================================
[23-07-06_06:40:12] [INFO] 기깔나는 사람들 통합 관리 서버 API 무중단 배포 서버 작업 중 Nginx Container 서비스 설정 작업이 시작 되었어요.
======================================[23-07-06_06:40:12] 통합 백 오피스 api Nginx Container 서비스 설정 작업======================================
[23-07-06_06:40:12] [INFO] Author(만든이): 주니(junyharang8592@gmail.com)
[23-07-06_06:40:12] [INFO] LOG Directory 존재 합니다.
[23-07-06_06:40:12] [INFO] 임의의 Error Page 사용을 위해 설정 작업을 시작할게요.
[23-07-06_06:40:12] [INFO] 최초 Nginx Container 안에 error.html File을 저장할 Directory 생성 작업을 시작할게요.
[23-07-06_06:40:12] [INFO]  명령어 작업 성공하였어요.
[23-07-06_06:40:12] [INFO] 새롭게 작성된 error.html File Nginx Container /var/www/html 위치에 복사 할게요.
[23-07-06_06:40:12] [INFO] docker cp /data/deploy/giggal-total-back-office/deploy/prod/nginx/config/error.html nginx-total-back-office:/var/www/html/error.html 명령어 작업 성공하였어요.
[23-07-06_06:40:12] [INFO] 기존 Nginx Container 기본 default.conf File 보안 설정 내용 추가를 위해 제거 할게요.
[23-07-06_06:40:12] [INFO] docker exec nginx-total-back-office rm -rf /etc/nginx/con.f/default.conf 명령어 작업 성공하였어요.
[23-07-06_06:40:12] [INFO] 보안 설정이 추가되어 새롭게 작성된 default.conf File 복사 할게요.
[23-07-06_06:40:12] [INFO] docker cp /data/deploy/giggal-total-back-office/deploy/prod/nginx/config/conf.d/default.conf nginx-total-back-office:/etc/nginx/conf.d/default.conf 명령어 작업 성공하였어요.
[23-07-06_06:40:12] [INFO] 기존 Nginx Container 기본 nginx.conf File 제거 할게요.
[23-07-06_06:40:12] [INFO] docker exec nginx-total-back-office rm -rf /etc/nginx/nginx.conf 명령어 작업 성공하였어요.
[23-07-06_06:40:12] [INFO] 새롭게 작성된 nginx.conf File 복사 할게요.
[23-07-06_06:40:12] [INFO] docker cp /data/deploy/giggal-total-back-office/deploy/prod/nginx/config/nginx.conf nginx-total-back-office:/etc/nginx/nginx.conf 명령어 작업 성공하였어요.
[23-07-06_06:40:12] [INFO] Application 중단 없이 변경 사항 Nginx 적용 작업 실시할게요.
2023/07/06 06:40:18 [notice] 48#48: signal process started
[23-07-06_06:40:12] [INFO] docker exec nginx-total-back-office nginx -s reload 명령어 작업 성공하였어요.
=====================================================================================================
[23-07-06_06:40:18] [INFO] 기깔나는 사람들 통합 관리 서버 API 무중단 배포 서버 작업 중 Nginx Docker Container Health Check 작업이 시작 되었어요.
======================================[23-07-06_06:40:18] 통합 백 오피스 api  Nginx Docker Container Health Check 작업======================================
[23-07-06_06:40:18] [INFO] Author(만든이): 주니(junyharang8592@gmail.com)
[23-07-06_06:40:18] [INFO] LOG Directory 존재 합니다.
[23-07-06_06:40:18] [INFO] 최초 nginx-total-back-office 내부망 Health Check 시작할게요.
[23-07-06_06:40:18] [INFO] 사용 명령어: curl -I http://192.168.30.3:1000/api/test/profile | grep -oP 'HTTP/1.1 \K\d+' 
[23-07-06_06:40:18] [INFO] 1 번째 Health Check가 시작 되었어요.
  % Total    % Received % Xferd  Average Speed   Time    Time     Time  Current
                                 Dload  Upload   Total   Spent    Left  Speed

  0     0    0     0    0     0      0      0 --:--:-- --:--:-- --:--:--     0
  0     0    0     0    0     0      0      0 --:--:-- --:--:-- --:--:--     0
  0     4    0     0    0     0      0      0 --:--:-- --:--:-- --:--:--     0
[23-07-06_06:40:18] [INFO] curl -I http://192.168.30.3:1000/api/test/profile | grep -oP 'HTTP/1.1 \K\d+' 명령어 작업 성공하였어요.
  % Total    % Received % Xferd  Average Speed   Time    Time     Time  Current
                                 Dload  Upload   Total   Spent    Left  Speed

  0     0    0     0    0     0      0      0 --:--:-- --:--:-- --:--:--     0
  0     4    0     0    0     0      0      0 --:--:-- --:--:-- --:--:--     0
[23-07-06_06:40:18] [INFO] nginx-total-back-office Container 상태가 정상이에요.
[23-07-06_06:40:18] [INFO] curl -I http://192.168.30.3:1000/api/test/profile | grep HTTP | wc -l 명령어 작업 성공하였어요.
[23-07-06_06:40:18] [INFO] nginx-total-back-office 외부망 Health Check 시작할게요.
[23-07-06_06:40:18] [INFO] 사용 명령어: curl -I http://211.109.XXX.XXX:1000/api/test/profile | grep -oP 'HTTP/1.1 \K\d+' 
[23-07-06_06:40:18] [INFO] 1 번째 Health Check가 시작 되었어요.
  % Total    % Received % Xferd  Average Speed   Time    Time     Time  Current
                                 Dload  Upload   Total   Spent    Left  Speed

  0     0    0     0    0     0      0      0 --:--:-- --:--:-- --:--:--     0
  0     4    0     0    0     0      0      0 --:--:-- --:--:-- --:--:--     0
  0     4    0     0    0     0      0      0 --:--:-- --:--:-- --:--:--     0
[23-07-06_06:40:18] [INFO] curl -I http://211.109.XXX.XXX:1000/api/test/profile | grep -oP 'HTTP/1.1 \K\d+' 명령어 작업 성공하였어요.
  % Total    % Received % Xferd  Average Speed   Time    Time     Time  Current
                                 Dload  Upload   Total   Spent    Left  Speed

  0     0    0     0    0     0      0      0 --:--:-- --:--:-- --:--:--     0
  0     4    0     0    0     0      0      0 --:--:-- --:--:-- --:--:--     0
[23-07-06_06:40:18] [INFO] nginx-total-back-office Container 상태가 정상이에요.
[23-07-06_06:40:18] [INFO] curl -I http://211.109.XXX.XXX:1000/api/test/profile | grep HTTP | wc -l 명령어 작업 성공하였어요.
[23-07-06_06:40:18] [INFO] 기깔나는 사람들 통합 관리 서버 API 무중단 배포 작업 중 Nginx Docker Container Health Check 작업이 끝났어요.
[23-07-06_06:40:18] [INFO] 기깔나는 사람들 통합 관리 서버 API 무중단 배포 LOG 위치 : /var/log/deploy/giggal-total-back-office
[23-07-06_06:40:18] [INFO] 현재 운영 중인 Docker Container 정보 : 
[23-07-06_06:40:18] [INFO] CONTAINER ID   IMAGE          COMMAND                  CREATED          STATUS          PORTS                                   NAMES
a17bdd4c1fe3   nginx:latest   "/docker-entrypoint.…"   28 seconds ago   Up 27 seconds   0.0.0.0:1000->80/tcp, :::1000->80/tcp   nginx-total-back-office 
=====================================================================================================

[23-07-06_06:40:12] [INFO] 기깔나는 사람들 통합 관리 서버 API 무중단 배포 서버 작업 중 Nginx Container 서비스 제 설정 작업이 끝났어요.
[23-07-06_06:40:12] [INFO] 기깔나는 사람들 통합 관리 서버 API 무중단 배포 LOG 위치 : /var/log/deploy/giggal-total-back-office
[23-07-06_06:40:12] [INFO] 현재 운영 중인 Docker Container 정보 : 
[23-07-06_06:40:12] [INFO] CONTAINER ID   IMAGE          COMMAND                  CREATED          STATUS          PORTS                                   NAMES
a17bdd4c1fe3   nginx:latest   "/docker-entrypoint.…"   28 seconds ago   Up 27 seconds   0.0.0.0:1000->80/tcp, :::1000->80/tcp   nginx-total-back-office 
=====================================================================================================

[23-07-06_06:39:51] [INFO] 기깔나는 사람들 통합 관리 서버 API 무중단 배포 작업 중 Nginx Docker Container 기동 작업이 끝났어요.
[23-07-06_06:39:51] [INFO] 기깔나는 사람들 통합 관리 서버 API 무중단 배포 LOG 위치 : /var/log/deploy/giggal-total-back-office
[23-07-06_06:39:51] [INFO] 현재 운영 중인 Docker Container 정보 : 
[23-07-06_06:39:51] [INFO] CONTAINER ID   IMAGE          COMMAND                  CREATED          STATUS          PORTS                                   NAMES
a17bdd4c1fe3   nginx:latest   "/docker-entrypoint.…"   28 seconds ago   Up 27 seconds   0.0.0.0:1000->80/tcp, :::1000->80/tcp   nginx-total-back-office 
=====================================================================================================

[23-07-06_06:39:46] [INFO] 기깔나는 사람들 통합 관리 서버 API 무중단 배포 작업 중 NGINX Docker Container 존재 여부 확인 작업이 끝났어요.
[23-07-06_06:39:46] [INFO] 기깔나는 사람들 통합 관리 서버 API 무중단 배포 LOG 위치 : /var/log/deploy/giggal-total-back-office
[23-07-06_06:39:46] [INFO] 현재 운영 중인 Docker Container 정보 : 
[23-07-06_06:39:46] [INFO] CONTAINER ID   IMAGE          COMMAND                  CREATED          STATUS          PORTS                                   NAMES
a17bdd4c1fe3   nginx:latest   "/docker-entrypoint.…"   28 seconds ago   Up 28 seconds   0.0.0.0:1000->80/tcp, :::1000->80/tcp   nginx-total-back-office 
=====================================================================================================

SSH: EXEC: completed after 48,847 ms
SSH: Disconnecting configuration [op-total-back-office-nginx] ...
SSH: Transferred 0 file(s)
[Pipeline] echo
운영 환경 DMZ 서버 NGINX Docker 관련 작업 소요 시간 : 49.621 초
[Pipeline] }
[Pipeline] // script
Post stage
[Pipeline] script
[Pipeline] {
[Pipeline] discordSend
Sending notification to Discord.
[Pipeline] }
[Pipeline] // script
[Pipeline] }
[Pipeline] // stage
[Pipeline] stage
[Pipeline] { (Jenkins CI/CD 작업 완료)
[Pipeline] sh
+ echo Jenkins CI/CD 작업이 완료 되었어요. 😎
Jenkins CI/CD 작업이 완료 되었어요. 😎
Post stage
[Pipeline] discordSend
Sending notification to Discord.
[Pipeline] }
[Pipeline] // stage
[Pipeline] }
[Pipeline] // withCredentials
[Pipeline] }
[Pipeline] // withEnv
[Pipeline] }
[Pipeline] // node
[Pipeline] End of Pipeline
[Gitea] Notifying branch build status: SUCCESS This commit looks good
[Gitea] Notified
Finished: SUCCESS

Jenkins의 배포를 실시해 보면 위와 같이 Console Output을 통해 정상적으로 배포가 진행된 것을 확인할 수 있고,
쉘 스크립트에 대한 내용도 주니가 의도한대로 진행된 것을 확인할 수 있어요.

애플리케이션 도커가 정상적으로 구동중인지 확인해 볼게요.

∙ MAIN Container

∙ SUB Container

위와 같이 정상적으로 접속할 수 있는 것을 확인할 수 있어요.

이번에는 NGINX를 통해 내, 외부 모두 위와 동일한 접속 테스트를 진행 해 볼게요.

∙ 내부망

∙ 외부망

⚠️ 참고로 운영 환경에서 Swagger를 기동 시킨다면 외부에서 내부 정보, 혹은 공격 등이 가능할 수 있기 때문에 반드시
운영 환경에서는 Swagger 등 모니터링을 위한 서비스가 기동되지 않게 해줘야 해요.

위와 같이 설정하면 운영 환경에서는 아래와 같이 Swagger 동작을 막을 수 있어요.

이렇게 모두 정상적으로 배포가 된 것을 확인할 수 있어요.

주니가 작성한 무중단 배포 정리 내용은 어떠셨나요?

혹시라도 잘 못 되었거나, 추가 되면 좋은 점 혹은 수정되면 좋은 점이 있다면 댓글로 따뜻한 조언 부탁드리겠습니다!

참고로 어디까지나 해당 배포 작업은 주니가 현재 구성한 서버 환경이라던지 사용하고자 하는 목적 등에 맞춰서
CI/CD Pipeline을 구성하고, 각 종 쉘 스크립트를 만든 것이라고 참고하여 주시면 고맙겠습니다.

긴 글 읽어주셔서 고맙습니다!

NGINX 쿡북 : 115가지 레시피로 배우는 고성능 부하분산 보안 서버 배포와 관리 2판

COUPANG

www.coupang.com

"이 포스팅은 쿠팡 파트너스 활동의 일환으로, 이에 따른 일정액의 수수료를 제공받습니다."

이전 글: [CI/CD] Jenkins + Docker를 이용한 무중단 배포 - ④ NGINX Server Docker Job (③ NGINX Docker Run & Health Check)

728x90

저작자표시 비영리 변경금지