본문 바로가기

개발/Linux & DevOps

자체 진행한 도커 젠킨스 해커톤 후기 ㅎㅎ 2022. 11. 1. 사내 Devops 스터디 사내 스터디 5인이서 데브옵스 스터디를 진행했다. 강의와 책을 통해서 지식을 쌓은 우리는, 가시적인 결과를 만들기 위해 단합하여 해커톤을 진행하기로 했다. 해커톤 개요 목적 : 참가자 개인마다 도커 + 젠킨스 + 깃허브 프로젝트를 1개씩 구축한다. 요구사항 : git push 실행 깃허브에서 웹훅을 발송 젠킨스는 웹훅을 받아서 빌드를 실행 도커 이미지가 생성되며 배포 성공 git 프로젝트는 자신이 임의로 구성하면 된다. 내 프로젝트는 나는 과거에 만들었던 내 php 프로젝트를 dockerize 시키기로 했다. php + db 연동이 되어 있었고, 이 기회에 둘 다 컨테이너로 띄워서 docker-compose 를 사용해봤다. 스펙은 아래와 같다. php : 7.3 mysql : 5..
Docker Compose 사용 이유, 방법, 몇가지 꿀팁 2022. 11. 1. 서론 도커 실행엔 수많은 옵션이 붙는다. docker run -it -p 8080:40001 -v ~./docker\_proj:/app/service/ 등등등 이걸 일일히 다 기억할 수 있는가? 만약 상호 의존성이 있는 컨테이너라면 실행 순서도 문제가 된다. 이 모든걸 해결해줄 영웅이 나타났으니...! 그게 바로 도커 컴포즈 이다. 도커 실행옵션들을 yml 형태로 정리하여, 한번에 호출이 가능하다. 목차 docker-compose.yml 예제 docker-compose 명령어 실행중인 컨테이너에 터미널로 붙기 몇가지 팁 가장 간단한 예제 docker-compose.yml 먼저 docker-compose.yml 이 필요하다. 아래는 간단한 web서버 + db서버 이다. #이 버전은 [도커 컴포즈] 버전이다..
Dockerize 이야기 : Docker Image, Dockerfile 최적화 원리 2022. 9. 14. FROM node WORKDIR /app COPY . /app RUN node install CMD ["node", "server.js"] 도커 이미지는 여러개 레이어로 구성됨, 레이어는 캐싱 됨. (재사용 가능) Dockerfile 윗줄부터 순서대로 변경사항 체크 변경사항이 있을 때 그 밑으로 전부 새로운 레이어를 만듬. 결론 : 빌드 시간을 줄이기 위해선, 변경이 잦을 수록을 밑으로 배치함. 고민의 흔적 git pull ▷ mvn package ▷ run (deploy) 이 과정을 어디서부터 docker container 에서 실행할 지? 옵션 1 : docker run ▷ git pull ▷ mvn package ▷ run (deploy) 장점 : 온전히 container 독립적. 빌드, 테스트, ..
구름 | 장애 대응 특강 노트 정리 2022. 8. 29. 모니터링 요소의 예 현재 정상 서버의 수 현재 요청 수 (API별) 현재 요청 실패 수 (API별) 디스크 사용량 네트워크 사용량 로그 크기 모니터링 수치에 대한 지속적인 리팩토링이 필요하다 장애 발생시 행동 절차 장애 관련 확인 에러 메시지가 갑자기 많이 늘었는지? 해당 메시지가 늘어나면 해당 에러메시지를 확인한다. 이 때 장애의 원인까진 파악하지 않는다. 장애라는 것만 확인 장애라면 유관자에게 장애 발생 전파 장애가 시작되고 끝날 때까지 지속해서 유관 부서에 상태를 공유합니다. 장애를 혼자 덮개끔 하는 회사 분위기를 지양해야한다. 전사가 대응해야한다. 우수한 장애 대응 예시 : 라인 장애 대응 문화 찾기 쉬운 담당자 연락망 기준표에 따른 장애 등급 분류 근무일 기준 1일 이내에 1차 보고 완료 필수 ..
Jenkins 공식문서 후기 (CasC, 디렉터리 구조, 시스템 설정 등) 2022. 4. 14. 공식문서에서 발췌했습니다. Jenkins 기본구조 Java Servlet 기반, war 파일 형태로 제공 설정하기 (CasC : Configuration as Code) Manage Jenkins >> Configuration as Code >> View Configuration * 다운로드해서 코드 편집 가능 * 반영시 Reload 필요 yaml 사용 CASC_JENKINS_CONFIG 경로상의 모든 .yml, yaml, .YML 확장자 파일 /.hidden/secret.yml 과 같이 숨김 디렉터리로 숨김 가능 심볼릭링크 사용가능. (파일 링크, 디렉토리도 추적함) 다른 파일들이 같은 설정을 건드릴시 충돌 발생 여러가지 기능 Jenkins Job : Jenkins 가 shutdown 됐을 시, 메일로..
docker jenkins CD/CI ② - publish over ssh 와 pipeline sshTransfer 2022. 3. 22. 서론 이전 글에서 언급했다시피publish over ssh 에서 Exec command 창에 입력하는 bash 명령어는 무엇이든 가능하여, pipeline 을 대체할 수 있을 정도이다. 많은 사람들이 각자 다른 방식으로 구축을 했다. 누군가는 project 빌드까지 jenkins server 에서 진행, conf 파일과 tar 압축하여 ssh 전송 후 배포 [링크] 누군가는 git pull 받은 소스를 pipeline 설정으로 전부 배포 서버로 ssh 전송 후 빌드, 배포 [링크] 누군가는 publish over ssh 는 아니지만, pipeline 에서 ssh 커맨드를 통해 배포 [링크] 등등 다양한 방법이 있다. 개인적으로는 pipeline 의 역할이 분명하고, 그 바운더리 안에서 관리가 되야한다고 ..
docker jenkins CD/CI ① - 각자 역할, 작동 흐름 절차 2022. 3. 21. 회사에서 수동으로 배포를 하고 있는 문제점을 jenkins, docker 를 사용한 자동 배포 시스템 + harbor private docker hub를 구축하여 해결 중이다. 맨 처음 구축할 때 git pull project build docker build docker run 의 과정에서, Q. 어디서 build 가 일어나고, 어디서 run 하게 되는가? A. 별도의 세팅을 하지 않을 경우: jenkins 서버에서 저 일련의 과정들이 실행되고, 결과물도 다 jenkins 서버에 남는다. jenkins 서버 안에서 git pull, build, docker run 이 실행된다. = docker_hub는 이미지를 다운로드 받는 단방향 통신만 일어난다. 이 안에서 docker image가 업데이트는 되지 ..
ngrinder & scouter 부하테스트 후기, 통계 해석까지 2022. 1. 27. 서버 컴퓨터를 부하테스트로 신나게 괴롭혀보자! 신설 서버 4대에 대한 부하테스트를 진행했습니다. 테스트 항목은 "최대성능"과 "안정성" 입니다. 최대성능 테스트 조건: 450명의 가상유저가 지속적으로 요청을 보내고, 응답 즉시 다시 요청을 보냄. ( 5 agents, 3 processes, 30 threads ) 14명 가상유저 시작, 10초 간격으로 14명씩 추가 10분간 테스트 타켓 서버를 htop 명령어로 모니터링 2가지 요청 방식으로 각 1회 진행 안정성 테스트 조건: 25명의 가상유저가 지속적으로 요청을 보내고, 응답 즉시 다시 요청을 보냄. 25명의 가상유저 시작, 끝까지 유지 48시간 테스트 타켓 서버를 htop 명령어로 모니터링 기본 요청 방식으로 1회 진행 서버 구조: Agent Serv..
부하 테스트 툴 ngrinder 3.5.5 구축&사용 후기! 2022. 1. 5. 내 밑에서 일하는 사람들이 진짜 부하인지 테스트 하는 것을 부하테스트라고 한다. 어? 이게 아닌가? 목차 서론 ngrinder 의 특징 설치 - 컨트롤러 설치 - 에이전트 Groovy 스크립트 테스트 최종 평가 서론 회사에서 서버 증설에 따라 서버를 구축하고 성능을 테스트해볼 필요가 생겼다. 어떤 툴이 적절할까 알아보다가 대부분 부하 테스트 툴은 get / post 요청할 url 만 입력받는 형식인데, 자사 서비스는 단순 post 요청 방식으로 진행되지 않기 때문에 직접 스크립트를 작성할 수 있는 ngrinder 를 선택하게 되었다. 엔그라인더! 너로 정했어! ngrinder 의 특징 직접 Groovy, Jython 언어를 사용해 테스트 스크립트를 짤 수 있다. Groovy는 Java와 거의 완벽 호환된..

티스토리툴바