개-발/Infra

Pub/Sub(발행-구독)형태는 현대 애플리케이션에서 비동기 이벤트를 처리하고 확장성을 확보하는 데 자주 사용되는 설계 방식이다.하지만 이벤트 브로커는 메시지를 발행하고 구독자(Subscriber)가 가져가는 구조에서 몇 가지 중요한 점을 고려해야 한다.RedisRedis 의 pub/sub 은 스트림 형태로publish 한 즉시 데이터가 subscriber 에게 전달되고 소멸되는 특성을 가지고 있다 (휘발성 데이터)각 이벤트/메세지 브로커 마다 특성이 있으니 사용시 주의 하도록 하자1. 메시지 중복publisher 는 멱등성 프로듀서를 지원하는 이벤트 브로커도 있다하지만 주는쪽 말고 받는 쪽에서도 중복처리에 대한 멱등성 처리를 신경써야 한다.Unique key를 두어 데이터의 중복을 방지한다 ( 타임스탬..

멱등성멱등성이랑 데이터가 중복으로 요청되더라도 응답과 시스템 상태가 항상 같아야(일관성이 있어야) 한다.응답fun print(text: String) = text특정 문자를 받아서 문자 그대로를 리턴하는 코드처럼 같은 요청에 같은 응답을 받는것이다.시스템 상태특정 인스턴스를 생성해서 저장하는 요청이라고 하면 리소스가 시스템에 계속 생성이 될 것이다.이러면 시스템 상태에 영향을 주어, 멱등성이 없다라고 한다.멱등성 보장멱등성을 보장 해주기 위해 비즈니스 로직에서 처리하는 방법으로는ID 키를 활용한 중복 생성방지요청마다 유니크한 필드를 기준으로 db에 저장시켜준다.데이터 저장시 특정 필드를 조회하여 비교 후 존재하면 존재하는 데이터를 응답시켜주기도 , 예외를 던져주기도 한다.캐시요청 후 생성된 유니크한 ID..

동시에 몇개의 요청을 받았을때 서버의 에러가 급격하게 늘까 ? ( 임계점 식별 )각 HTTP 메서드마다 얼마의 요청을 버틸 수 있을까 ? ( 병목 구간 개선 )각 테스트는 가장 무겁고 처리 로직이 복잡한것으로 선택한다.테스트는 POST / GET 이 있다.GET게시물 조회를 선택했다.게시물 조회는 현재 게시물의 좋아요 개수, 댓글 개수 , 각 댓글의 좋아요 갯수 , 대댓글 갯수 , 페이징 처리 , 차단 유저 제외데이터를 가져오도록 설계되어, 많은 테이블의 조인과 서브쿼리가 사용되어 무겁다고 판단 하였다.Post 게시물 생성 API 를 선택했다.게시물 생성로직은 여러 파일이 전송 되어야 해서 선택 하게 되었다.RPS: 초당 요청 수(request per sec)TPS: 초당 트랜잭션 처리 수 (transa..

엔그라인더로 파일 전송 테스트를 하거나 multipart-form 형식 요청의 스크립트 작성 방법scriptimport groovy.json.JsonBuilderimport static net.grinder.script.Grinder.grinderimport static org.junit.Assert.*import static org.hamcrest.Matchers.*import net.grinder.script.GTestimport net.grinder.script.Grinderimport net.grinder.scriptengine.groovy.junit.GrinderRunnerimport net.grinder.scriptengine.groovy.junit.annotation.BeforeProcess..

설치https://github.com/naver/ngrinder/releases Releases · naver/ngrinderenterprise level performance testing solution. Contribute to naver/ngrinder development by creating an account on GitHub.github.comwar 파일을 받아준다실행java -Djava.io.tmpdir={설정디렉토리} -jar {ngrinderWar파일}//exjava -Djava.io.tmpdir=/Users/hi/Desktop/ngrinder -jar ngrinder-controller-3.5.9-p1.warlocalhost:8080에 접속하면 nginder 페이지가 나온다.초기 로..

설치OS 에 따라 설치를 해준다.brew install jmeter//설치 완료 후 실행 명령어open /usr/local/bin/jmeterhttps://jmeter.apache.org/download_jmeter.cgi Apache JMeter - Download Apache JMeterDownload Apache JMeter We recommend you use a mirror to download our release builds, but you must verify the integrity of the downloaded files using signatures downloaded from our main distribution directories. Recent releases (48 hour..

problemec2 를 이전하고 시스템을 바꾸던 도중 swagger 에서 포트 바인딩을 못하고 있었다 Spring 설정은 똑같이 이전 했는데 말이다.따로 설정을 해주지 않아도 알아서 잘 잡았던 녀석....변경된 사항은 NginX 를 사용하고 있다는 것이었다.현재는 0001->1111 -> 90900001->1112 -> 90900002->1113 -> 90910002->1114 -> 9091이런식으로 바인딩 해주고 있었다.swagger 는 여기서 찾지 못한듯 하다.solution요청은 9090으로 하는데 docker 컨테이너 포트는 1111로 연결 되어있으니 swagger 가 갈 길을 잃은것 같다.ec2-info.ymlec2: host: 탄력IP prd: port: 0001 dev: po..

problemaws 프리티어는 1기가의 메모리를 제공하는데 dev 채널과 prd 채널을 docker 컨테이너화 하면 금방 메모리가 부족하여 OOM 이 발생된다.solution1. aws 볼륨 크기 조정aws 프리티어는 30기가의 디스크를 무료로 제공한다기본으로 생성 할 시 8기가로 생성 된다.[ec2 대시보드] -> [볼륨] -> [볼륨 ID] -> [오른쪽 위 수정 버튼]볼륨크기를 30기가로 늘리고 인스턴스를 재시동 한다.df -h2. 스왑 설정2-1 파일 생성sudo dd if=/dev/zero of=/swapfile bs=128M count=16또는sudo fallocate -l 2G /swapfile명령어로 2G 짜리 스왑파일을 생성 한다.2-2 권한 설정 sudo chmod 600 /swapfi..