지금의 기록이 미래의 자산이 된다.

• [Goodfriends] EC2 환경에서 도커를 활용한 젠킨스 설치하기

  2023-08-25

  devFancy

  Side_Project
  • 젠킨스 도입
  • 1. Jenkins 전용 EC2 서버 생성
    • 1-1. 인스턴스 시작
  • 도커를 사용하는 이유

  굿프렌즈 기술 블로그 방문하기 🎋

  이 글은 우리FISA 1기 굿프렌즈팀의 기술 블로그에 게시된 글 입니다.

  우선 굿프렌즈팀의 프로젝트에서 구축하려는 CI/CD 구조는 다음과 같습니다.

  

  이번 스프린트3에서는 저는 배포와 CI/CD와 같이 인프라와 관련된 태스크에 집중하고 있습니다.

  기존 스프린트 2에서 굿프렌즈팀은 새로운 기능을 병합할 때마다 SSH로 EC2 인스턴스에 접속하여 쉘 스크립트를 매번 실행해야만 한다는 단점이 존재했습니다. 저희 팀은 develop 브랜치에 새로운 기능을 병합될 때마다 자동으로 감지하고, 스프링 애플리케이션을 jar 파일로 빌드하여 배포하는 환경이 필요하다고 느꼈습니다. 따라서 CI/CD 도구를 도입하기로 결정했습니다.

  이번 글에서는 굿프렌즈가 EC2 환경에서 도커를 사용하여 젠킨스를 설치한 방법에 대해서 정리하려고 합니다.

  젠킨스 도입

  파이프라인을 구축할 때 여러 가지 방법이 있습니다. Github Action, Jenkins, Travis CI, Circle CI 등등

  그 중에서 젠킨스(Jenkins)는 세계적으로 많은 개발자들이 사용중인 CI/CD 관리(빌드, 테스트, 배포)를 돕는 개발 도구입니다.

  그리고 젠킨스는 매우 다양한 IDE를 지원하고 개발자가 직접 커스텀할 수 있는 옵션이 많습니다.

  또한 많은 개발자분들이 사용하기 때문에 래퍼런스할 수 있는 다양한 문서들이 존재하여 초기 학습 비용이 적게 든다고 생각합니다.

  따라서, 젠킨스를 구축하고 인프라에 있어서 다양한 선택지를 가져가는게 더 좋을 것 같아서 젠킨스를 도입하기로 결정했습니다.

  1. Jenkins 전용 EC2 서버 생성

  저희 굿프렌즈팀은 우선 Jenkins 전용의 EC2 인스턴스 주소를 생성했습니다.

  1-1. 인스턴스 시작

  인스턴스 이름: GOODFRIENDS-jenkins-server

  애플리케이션 및 OS 이미지(Amazon Machine Image): Ubuntu

  

  인스턴스 유형: t2.micro

  키 페어(로그인): GOODFRIENDS-rsa-key.pem

  네트워크 생성

  • 기존 보안그룹 선택 -> GOODFRIENDS-jenkins-security-group -> 인바운드 규칙(아래 2가지 유형 추가)

  • 1) 유형: SSH / 포트 범위: 22 / 소스: 내 IP 주소

  • 2) 유형: HTTP / 포트 범위: 80 / 소스: 내 IP주소 / 설명: ec2 port for access to use jenkins

  도커를 사용하는 이유

  굿프렌즈 팀은 EC2 인스턴스에 도커를 사용하여 젠킨스 컨테이너를 띄웠습니다.

  만약 도커를 사용하지 않고, 젠킨스를 우분투에 직접 설치한다면 해주어야할 환경 설정이 많습니다. 젠킨스를 돌리기 위한 JDK 설치, 젠킨스 설치 및 포트 설정, 방화벽 설정 등등..

  하지만 도커를 이용한다면 이런 환경 설정 없이 간단한 명령어 몇 가지만으로 젠킨스를 설치하고 서버에 띄울 수 있습니다.

  즉, 우분투에 직접 설치할 때 해주어야할 여러 과정들을 생략할 수 있습니다.

  도커는 컨테이너 기술을 제공하는 수 많은 서비스들 중 하나입니다. 도커를 통해 젠킨스 컨테이너를 받아와서 실행만 하면 됩니다.

  이러한 이점으로 굿프렌즈팀은 도커의 이점을 이용하고자 도커를 사용하게 되었습니다.

  Read All

  ---

• [Goodfriends] Agile 기반 Scrum 프로세스 도입

  2023-08-17

  devFancy

  Side_Project
  • 애자일(Agile)이란?

  굿프렌즈 기술 블로그 방문하기 🎋

  이 글은 우리FISA 1기 굿프렌즈팀의 기술 블로그에 게시된 글 입니다.

  애자일(Agile)이란?

  애자일 소프트웨어 개발(Agile software development) 혹은 애자일 개발 프로세스는 소프트웨어 엔지니어링에 대한 개념적인 얼개로, 프로젝트의 생명주기동안 반복적인 개발을 촉진한다. - 위키백과 -

  Read All

  ---

• [Goodfriends] 우리 팀의 Git-flow 전략을 소개합니다.

  2023-08-15

  devFancy

  Side_Project
  • Git-flow 전략
  • 결과: 굿프렌즈팀의 Git-flow
  • Git Repository 구성

  굿프렌즈 기술 블로그 방문하기 🎋

  이 글은 우리FISA 1기 굿프렌즈팀의 기술 블로그에 게시된 글 입니다.

  이 게시글은 git에 대한 기본적인 명령어 이해를 알고 있다는 전제하에 작성했습니다

  Git-flow 전략

  git 브랜치의 대표적인 전략은 다음과 같습니다.

  • git flow
  • github flow
  • gitlab flow

  우리 팀은 git 브랜치 전략 중 하나인 Git flow 전략을 사용하기로 했습니다. 참고로 “git flow”는 2010년 빈센트 드리슨이 창안했습니다.

  하지만 git flow 전략을 모두 가져가진 않고, 그중에서 필요한 부분을 가져가기로 했습니다.

  git flow 전략을 들어본 사람은 알겠지만, 배포 주기가 길고 팀의 이력이 있는 경우 적합한 브랜치 전략입니다.

  결과: 굿프렌즈팀의 Git-flow

  

  결론적으로 우리 굿프렌즈팀이 Git-flow을 적용한 사진입니다.

  해당 부분에 대한 설명을 지금부터 다루도록 하겠습니다.

  Git Repository 구성

  프로젝트 시작하기에 앞서, 현재 Git Repository 구성부터 살펴보겠습니다.

  

  위 그림은 Git Repository 구성과 워크플로우를 설명하고 있습니다.

  Read All

  ---

• [Goodfriends] 굿프렌즈팀의 이벤트 스토밍(Event Storming) 도입기

  2023-08-05

  devFancy

  Side_Project
  Read All

  ---

• [DB] 파티셔닝(Partitioning)

  2023-06-14

  devFancy

  Database
  • Motivation
  • 파티셔닝이란
  • 파티셔닝의 목적
    • 성능(performence)
    • 가용성(Availability)
    • 관리 용이성(Manageability)
  • 파티셔닝의 장단점
    • 장점
    • 단점
  • 파티셔닝 방식
    • 수평 분할 방식
    • 수직 분할 방식
  • 파티셔닝 종류
    • RANGE 파티셔닝
    • LIST 파티셔닝
    • HASH 파티셔닝
    • KEY 파티셔닝
  • Reference

  이 글은 MySQL 공식문서를 바탕으로 공부하고 정리한 내용입니다.

  Motivation

  • 서비스, 사용자 요구사항의 고도화에 따라서 데이터 규모가 대용량으로 증가되면서, 기존에 사용하던 DB의 용량(storage)과 성능(performance)에 한계가 생기게 된다.

  • 즉, VLDB(Very Large DBMS)와 같이 하나의 DBMS에 너무 큰 table이 들어가면서 용량과 성능 측면에서 많은 이슈가 발생하게 되었고, 이런 이슈를 해결하기 위한 방법으로 테이블을 partition이라는 몇 개의 단위로 나눠서 관리하는 파티셔닝(Partitioning) 기법을 활용하면 된다.

  • 파티셔닝(Partitioning) 기법을 통해 SW적으로 DB를 분산처리하여 성능이 저하되는 것을 방지하고 관리를 보다 수월하게 할 수 있게 되었다.

  파티셔닝이란

  • 파티셔닝(Partitioning)이란 하나의 테이블을 다수의 테이블로 분할하여 관리하는 것을 의미하며, 프로그래머 입장에서는 여전히 하나의 테이블로 동작하는 것처럼 사용할 수 있다.

  • 즉, 큰 테이블이나 인덱스를, 관리하기 쉬운 파티션이라는 작은 단위로 물리적으로 분할하는 것을 의미한다.

  • 논리적으로는 하나의 테이블처럼, 물리적으로는 여러 개의 테이블로 구성된다.

  파티셔닝의 목적

  성능(performence)

  • 특정 DML과 Query의 성능을 향상시킨다.

  • 주로 대용량 data wirte 환경에 효율적이다.

  • 특히, full scan에서 데이터 access의 범위를 줄여 성능 향상을 가져온다.

  가용성(Availability)

  • 물리적인 파티셔닝으로 인해 전체 데이터의 훼손 가능성이 줄어들고 데이터 가용성이 향상된다.

  • 각 분할 영역(partition 별로)을 독립적으로 백업하고 복구할 수 있다.

  • table의 partition 단위로 Disk I/O을 분산하여 경합을 줄이기 때문에 update 성능을 향상시킨다.

  관리 용이성(Manageability)

  • 큰 테이블을 제거하여 관리를 쉽게 해준다.

  파티셔닝의 장단점

  장점

  • 관리적 측면: partition 단위 백업, 추가, 삭제, 변경
    • 전체 데이터를 손실할 가능성이 줄어들어 데이터 가용성이 향상된다.
    • partition별로 백업 및 복구가 가능하다.
    • partition 단위로 I/O 분산이 가능하며 update 성능을 향상시킨다.
  • 성능적 측면: partition 단위로 조회 및 DML 수행
    • 데이터 전체 검색시 필요한 부분만 탐색해 성능이 증가된다.
    • 즉, full scan에서 데이터 접근의 범위를 줄여 성능 향상을 가져온다.
    • 필요한 데이터만 빠르게 조회할 수 있기 때문에 쿼리 자체가 가볍다.

  단점

  • table간 JOIN에 대한 비용이 증가한다.
  • table과 index를 별도로 파티셔닝할 수 없다. -> table과 index를 같이 파티셔닝해야 한다.

  파티셔닝 방식

  • 테이블을 파티셔닝하는 방법은 크게 2가지로 구분할 수 있다.

  1. 수평 분할 - 주로 사용
  2. 수직 분할

  

  수평 분할 방식

  • 수평분할(Horizontal Partitioning)은 행(row)을 기준으로 테이블을 분할하는 형테이다.

  수직 분할 방식

  • 특정 열에 대한 접근을 제한하거나 성능 향상이 필요할 때 열(column) 기준으로 분할하는 방식이다.

  파티셔닝 종류

  RANGE 파티셔닝

  • 지정된 범위에 속하는 열 값을 기반으로 파티션에 행을 할당한다.

  • 예를 들어, 우편 번호를 분할 키로 수평 분할하는 경우이다.

  LIST 파티셔닝

  • 값 목록에 파티션을 할당 분할 키 값을 그 목록에 비추어 파티션을 선택한다.

  • 예를 들어, Country 라는 컬럼의 값이 Iceland , Norway , Sweden , Finland , Denmark 중 하나에 있는 행을 빼낼 때 북유럽 국가 파티션을 구축 할 수 있다.

  HASH 파티셔닝

  • 해시 함수의 값에 따라 파티션에 포함할지 여부를 결정한다.

  • 예를 들어, 4개의 파티션으로 분할하는 경우 해시 함수는 0-3의 정수를 돌려준다.

  KEY 파티셔닝

  • key 파티션은 hash 파티션과 거의 동일하다.

  • key 파티션은 선정된 파티션 키 값에 대하여 내부적으로 MD5()을 이용하여 해시값을 계산하고, 그 값에 MOD를 적용하여 저장할 파티션을 결정한다.

  Reference

  • [DB] DB 파티셔닝(Partitioning)이란

  • [MySQL] Chapter 24 Partitioning

  • Why Horizontal Partitioning Is Important For Database Design

  Read All

  ---