728x90
반응형
SMALL
[

전체 글 검색 결과

해당 글 329건
728x90
반응형
LIST

Spring Integration Udp 통신중 버퍼 크기로 인한 트러블 슈팅

Spring Integration Udp 통신중 버퍼 크기로 인한 트러블 슈팅실제 udp 통신으로 6000 크기의 바이트 데이터들을 받고 있음 그러나 문제 터짐나는 6654 크기의 바이트 패킷을 받았지만 디버깅 결과 2048 이라는 잘린 패킷을 받음 @ServiceActivator(inputChannel = "udpInputChannel") public void receiveUdpMessage(Message message) { log.info("udpInputChannel {}",Thread.currentThread().getName()); byte[] bytes = (byte[]) message.getPayload(); ...패킷이 잘렸기 때문에 정상적인..
나의 주니어 개발 일기/트러블슈팅 2024. 7. 5. 14:19

카프카 기본 구조 정리

카프카카프카는 링크드인 에서 만들어진 고성능 분산 이벤트 스트리밍 플랫폼` 도입이전파편화된 데이터 수집 및 분배 아키텍처를 운영하는데 큰 어려움을 겪음타킷 애플리케이션 장애 발생시 소스 애플리케이션에 직접적으로 영향을 줌카프카 등장 도입후카프카를 중앙 배치함으로써 소스/타킷 애플리케이션 간 의존도 완화기존 1:1 매칭 파이프라인의 의존도 타파구성요소주키퍼카프카의 메타데이터 관리, 브로커의 health check 담당 카프카 또는 카프카 클러스터아파치 프로젝트 애플리케이션으로 여러대의 브로커를 구성한 클러스터를 의미 브로커카프카 애플리케이션이 설치된 서버 또는 노드 프로듀서카프카로 메시지를 pub 하는 클라이언트 컨슈머카프카로부터 메시지를 consume 하는 클라이언트 토픽카프카는 메시지 피드를 토픽으로 ..
나의 주니어 개발 일기/카프카(kafka) 2024. 6. 26. 13:50

빅엔디안, 리틀엔디안이란?

이기종간 시스템 연계JAVA C, C++..상황서로 네트워크 통신을 통해서 데이터를 주고 받는 상황 문제사전에 정의된 포멧대로 데이터를 주고 받았으나JAVA, C 각각의 시스템 단에서 포멧에 유효하지 않은 데이터들로 수신되기 시작 문제파악데이터 포멧 예제 1.네트워크 패킷 확인같은 데이터 포멧을 기준으로 서로 송신하는 테스트를 진행을 했다.C -> JAVAC에서는 데이터 타입 구분자를 3로 보낼것이며 이를 03 00 00 00 으로 저장하여 데이터를 송신한다.실제 네트워크 패킷을 확인해보면 03 00 00 00 으로 확인되며, JAVA에서 데이터를 읽을때는 왼쪽부터 읽기 때문에 3,000,000이라는 엄청 큰 숫자로 인식하게 된다. JAVA -> C00 00 00 04 00 0001 8f e5 bd e..
Language/자바 2024. 6. 11. 14:29

volatile 이란?

JVM 메모리 모델과 하드웨어 메모리 모델간의 관계https://takeaction.github.io/Java-Memory-Model/https://software.rajivprab.com/2018/04/29/myths-programmers-believe-about-cpu-caches/https://beatmejy.tistory.com/15https://chunsubyeong.tistory.com/73속도 기준으로 L1>L2>L3로 L1이가장 빠르다.일반적으로 L1, L2, L3 캐시는 CPU 내부에 위치하지만 L2 부터는 외부에 위치할 수도 있다.L1 캐시 (Level 1 Cache):L1 캐시는 CPU 코어 내부에 위치하며, 매우 빠른 액세스 시간을 가진다명령 캐시와 데이터 캐시로 나뉜다.L2 캐시 ..
Language/자바 2024. 6. 9. 00:41

CQRS란?

CQRS란?Command and Query Responsibility Segregation 약자로서,데이터 저장소로부터 읽기와 업데이트 작업을 분리하는 패턴이다.전통적인 아키텍처에서는 DB 데이터를 조회/업데이트를 할 때 같은 데이터 모델이 사용되었다.그러나 애플리케이션이 복잡해진다면 이는 여러 문제를 야기한다.1.표현 데이터의 불일치 및 가시성 저하조회에 사용되는 모델이 업데이트에 사용된다면 자칫 모든 데이터를 업데이트를 할 수 있는 건가? 라고 잘못된 판단을 할 수 있다.2.단일 책임원칙 위배조회성 모델은 대게 자주 변경되기 쉽다. 만약 특정 데이터를 보여주면 안되지만 업데이트시 꼭 필요한 데이터라면? 관리가 힘들어진다. 책임을 분리하자. 이를 해결하기 위해? CQRS 두두등장!!CQRS는 읽기와 쓰..
나의 주니어 개발 일기/헷갈렸던 개념들 2024. 5. 29. 10:02

스핀락, 뮤텍스, 세마포어

교착상태공유 자원을 두고 서로 다른 접근자가 경쟁하는 과정, 서로 자원을 소유하려다 보니 누구도 소유할 수 없는 상황을 교착상태라고 한다. 교착 상태가 되기 위한 필수 4가지 조건. 1개라도 해당 사항이 없으면 교착상태가 아니다상호 배제(mutual exclusion)점유 대기비선점순환 대기 임계영역공유 데이터의 일관성을 보장하기 위해 하나의 프로세스/스레드만 진입해서 실행가능한 영역하나의 프로세스/스레만 진입해서 실행한다는것 = mutual exclusion 이라고 한다.  스핀락, 뮤텍스, 세마포어경쟁 조건을 완화하기 위한 방법들 중 상호 배제 방법, 또는 동기화 방법 이라고도 부른다. 스핀락스핀락은 자원을 소유할 수 있을때까지 지속적으로 물어본다.public class SpinLockExample ..
나의 주니어 개발 일기/헷갈렸던 개념들 2024. 5. 28. 14:36

빅오 표기법이란?

빅오 표기법이란?알고리즘의 효율성을 표기해주는 표기법, 알고리즘의 시간 복잡도와 공간 복잡도를 나타내는데 주로 사용시간 복잡도는 시간의 효율성을, 공간 복잡도는 메모리의 효율성을 의미왜 빅오(Big-O) 표기법을 사용하지?알고리즘의 최소한의 성능이 보장되도록 최악의 실행 시간을 표기한다. 때문에 가장 많이 사용된다.특징상수항을 무시한다.O(N+1)의 복잡도는 상수를 무시해 O(N)으로 표기한다.계수를 무시한다.O(5N)의 복잡도는 계수를 무시해 O(N)으로 표기한다.최고차항만 표기한다.O(3N^3+2N^2+N+5)의 복잡도는 O(N^3)으로 표기한다.빅오 표기법 종류O(1)가장 빠르다. 대표적으로 Queue의 삽입/삭제, Stack의 삽입/삭제, 배열의 인덱스 접근과 같은 연산이 이와 같다. O(log ..
나의 주니어 개발 일기/알고리즘 2024. 5. 14. 17:10

Pinpoint 를 통해서 모니터링을 해보자

pinpoint란?대규모 분산 시스템에서 성능 분석, 문제 진단 및 처리 하는 플랫폼이다.내부적으로 서버 상태를 실시간으로 모니터링 할 수 있는 다양한 시각지표를 제공한다.구성도pinpoint는 Agent+Manager 로 구성된다.Agent는 애플리케이션의 모니터링을 위한 수집 정보를 Pinpoint Collector로 전달한다.Pinpoint Collector는 Agent로 부터 받은 정보를 HBASE에 적재한다.Pinpoint Web은 적재 데이터를 Web으로 표출해준다.1. pinpoint 설치$ git clone https://github.com/naver/pinpoint-docker.git$ cd pinpoint-docker$ docker-compose pull$ docker-compose u..
나의 주니어 개발 일기/Docker(도커) 2024. 5. 13. 11:08

리액티브 프로그래밍 개념정리(2)

Backpressure란?emit 되는 데이터 처리 속도를 통제,조절 하는 것 Backpressure 전략 5가지IGNORE, ERROR, DROP, LATEST, BUFFERIGNORE 전략Backpressure를 적용하지 않는 전략, 이 전략을 그대로 사용할 경우 Downstream에서의 Backpressure 요청이 무시되기 때문에 illegalStateException이 발생한다. ERROR 전략Downstream 의 데이터 처리 속도가 느려 Upstream의 emit 속도를 따라가지 못할 경우 illegalStateException을 발생시킴, Publisher는 Error Signal을 Subscriber에게 전송하고 삭제한 데이터는 폐기 public static void error전략(..
SPRING/리액티브 프로그래밍 2024. 5. 10. 15:20

리액티브 프로그래밍 개념정리(1)

리액티브 프로그래밍을 하면서 나오는 개념들을 정리하자함수형 인터페이스란?추상메서드가 하나인 것함수형 프로그래밍에서는 함수를 일급 시민으로 취급한다.일급 시민은 함수를 값으로 취급한다는 고급진 표현이다. 어떤 함수 호출시 함수 자체를 파라미터로 전달할 수 있음람다 표현식, 메서드 래퍼런스은 함수형 인터페이스의 추상메서드를 간결하게 표현하기 위해 사용한다.Reactor란?Spring framework 팀의 주도 하에 개발된 리액티브 스트림즈의 구현체, 리액티브 프로그래밍을 위한 라이브러리라고도 말할 수 있다.Hot과 Cold의 의미Hot swap은 컴퓨터의 시스템이 전원이 켜져 있는 상태에서 디스크 등의 장치를 교체할 경우 시스템을 재시작하지 않고서 바로 장치를 인식하는 것Hot deploy는 서버를 재시작..
SPRING/리액티브 프로그래밍 2024. 5. 9. 17:05

클러스터드 인덱스 vs 넌클러스터드 인덱스

클러스터드 인덱스 vs 넌클러스터드 인덱스인덱스는 구조로서 보통 레코드에 빠르게 접근하기 위해 사용된다.DB에서는 두 종류의 인덱스가 존재한다. 그 차이를 알아보자.  인덱스가 없는 경우의 구조데이터가 삽입된 순서대로 페이지가 구성된다.  클러스터드 인덱스테이블 전체가 정렬된 인덱스가 되는방식, 실제 데이터와 무리를 지어 인덱싱되므로 클러스터드 인덱스라 부른다.데이터와 함께 전체 테이블이 물리적으로 정렬된다. Create, Delete, Update 할때마다 재정렬된다.클러스터드 인덱스는 테이블 당 하나만 만들 수 있다.mysql 에서는 자동으로 PK를 설정하면 클러스터드 인덱스가 된다.(default)  넌클러스터드 인덱스넌클러스터드 인덱스는 보조 인덱스(Secondary Index)라고도 불린다.인덱..
나의 주니어 개발 일기/DB 2024. 5. 8. 16:51

TypeScript 윈도우에서 환경설정하기

1.타입 스크립트 설치> npm i -g typescript## 버전을 명시하고 싶으면 뒤에 @2.7.5 추가할 수 있다. ex) npm install -g typescript@2.7.5> npm install -g typescript 2. .ts 파일 만들기const msg: string = "hello";console.log(msg); 3.컴파일 하기(ts -> js)> tsc app.ts만약에 컴파일에서 오류가 발생했다면?보안 오류: (:) [], PSSecurityException3-1.vscode 를 관리자 권한으로 접속3-2.현재 상태를 확인한다.> ExecutionPolicyRestricted 는 모든 스크립트가 제한되어 있는 상태3-3.스크립트 제한을 풀어주자> Set-ExecutionPo..
Language/TypeScript 2024. 4. 25. 17:13

JPA에서 transaction, AOP로 더티체킹이 되지 않는 이유

JPA에서 transaction, AOP로 더티체킹이 되지 않는 이유보통 아래처럼 @Transactional이 선언되어있는 메서드를 구현해 두고 호출하면 더티체킹이 적용이 된다. @Transactional public void update(Long id){ Member m = repo.findById(id).get(); m.setName("update1"); }그런데 그냥 아무 이유 없이 궁금한게 생겼다. 다른 @Transactional 이 없는 메서드에서 호출을 하면 어떻게 될까?아래 처럼 코드를 구성하고 테스트를 진행해봤다.//=== 엔티티 ===@Entity@Getter @Setterpublic class Member { @Id @GeneratedVal..
SPRING/JPA 2024. 4. 25. 14:39

커버링 인덱스 사용했을때 성능차이

테스트 환경 약 360만건 정도 되는 테스트 데이터에서 조건에 충족하는 데이터들을 찾을때 과연 커버링 인덱스를 사용하면 얼마나 큰 성능차이가 존재할까? ​ 기본으로 PK는 IDX로 지정되있으며, 인덱스는 type 컬럼으로 추가했다. sql select * from Test r WHERE r.`type`= '005' ORDER BY r.IDX 커버링 인덱스 사용 미사용 커버링 인덱스 사용과 미사용의 차이는 32/ms -> 2.48/s로 77배차이 ㄷㄷㄷ;; 실제로 엄청난 차이를 만들어낸다.
나의 주니어 개발 일기/DB 2024. 4. 23. 14:18

RestTemplate, Spring MVC vs WebClient, Spring WebFlux 성능테스트

API 호출 성능테스트를 진행하였다 1. 테스트 준비 공통조건: 외부로 요청하는 get api url은 동일하다. 1.Spring Mvc + RestTemplate @Bean public RestTemplate restTemplate(){ return new RestTemplate(); } @Slf4j @RequiredArgsConstructor @Service public class ApiCallService { private final RestTemplate restTemplate; @Value("${rest.fpl.date.url}") private String testUrl; public ResponseEntity fpl_date_call_v2(){ log.info(Thread.currentThr..
SPRING/스프링부트 2024. 4. 4. 16:25

nGrinder 로 API 부하테스트 하기 with 도커

1. nGrinder Controller, nGrinder Agent 설치 및 실행 docker-compose.yml version: '3.8' services: controller: image: ngrinder/controller restart: always ports: - "9000:80" - "16001:16001" - "12000-12009:12000-12009" volumes: - ./ngrinder-controller:/opt/ngrinder-controller agent: image: ngrinder/agent restart: always links: - controller $ docker-compose up 2. nGrinder 웹 접속 http://호스트아이피:9000/login admi..
나의 주니어 개발 일기/Docker(도커) 2024. 3. 29. 15:27