Mybatis와 Apache POI 를 이용한 대용량 엑셀 다운로드 개선

개요 사내의 레거시 어드민 시스템에서 자꾸 특정 시간에 메모리 점유율이 치솟다가 결국 멈추는 이슈가 있었다. 원인을 분석해본 결과 출력 건수가 많은 메뉴에서 엑셀 다운로드 요청시 전체 조회 -> List 형태로 메모리 저장 -> 엑셀 생성 -> 다운로드 공정으로 파일을 내려줬는데, 데이터가 적었다면 상관없지만 해당 메뉴는 기간을 조금만 늘려도 수십만 건에서 100만건 까지 늘어날 수 있는 메뉴였기 때문에 빈번하게 문제가 되었다. 결국 대용량 다운로드를 위한 공정이 추가로 필요해졌는데 해당 기능을 개발하며 있었던 과정들을 몇가지 기록해볼까 한다. 원인 찾기 개요에 작성했지만, 기존의 엑셀 다운로드 과정은 다음과 같다. 데이터 전체 조회 요청 JDBC 로 부터 응답받은 데이터를 하나의 List 에 일괄 저장..

• format_list_bulleted 노트/JAVA
• · 2024. 1. 31.
• textsms

TransactionRequiredException 해결 - 초기화 시점에 Transaction 획득

1. 개요 JPA 를 이용한 테스트 프로젝트를 진행하던 중 초기 데이터를 대량으로 INSERT 해주는 빈을 생성하려 하였다. @PostConstruct 를 통해 Spring Boot 애플리케이션이 기동되는 시점에 작성해둔 로직에 의해 테스트 데이터들이 persist 되는 방식이었다. 하지만 JPA 를 통해 데이터를 Insert 하기 위해서는 트랜잭션이 필요하고, 뭔가 찝찝한 느낌은 들었지만 대충 @Transactional 애노테이션만 붙이고 작동을 시켜보았다. 코드를 보면 다음과 같다. @Component @Transactional public class TestDataInit { @PersistenceContext private EntityManager em; @PostConstruct public v..

• format_list_bulleted 노트/Spring
• · 2024. 1. 29.
• textsms

스프링 기본 복습 3 - 빈 스코프와 생명주기

1. 개요 앞서 스프링이 많은 객체들을 싱글톤으로 관리하기 위해 스프링 컨테이너에 등록하여 필요한 시점에 제공한다고 학습했다. 하지만 싱글톤으로 빈을 가지고 있다는 것은, 리소스를 점유하고 있다는 의미이기도 하다. 그렇다면 모든 객체를 싱글톤으로 유지해야 할 필요가 있을까? 그리고 객체가 생성되고 소멸되는 순간에 필요한 동작들(예: 커넥션 연결 등)은 어떻게 다루어야 할까? 만약 서비스를 개발하던 도중, 서버로 오는 특정 API에 대해 UUID와 요청 URL을 로깅하는 기능을 개발한다고 가정하고 앞선 내용을 공부해보도록 하자. 2. 빈 스코프 Hello 문자열을 반환하는 가상의 아주아주 중요한(…!) API 가 있다고 가정해보자. 해당 API 의 요청 컨트롤러는 다음과 같다. @RestController..

• format_list_bulleted 노트/Spring
• · 2024. 1. 29.
• textsms

스프링 컨테이너를 활용한 전략패턴

1. 전략 패턴이란 전략 패턴은 알고리즘을 그룹으로 정의하고, 각 그룹을 별도의 클래스에서 관리하며 그룹의 알고리즘을 선택적으로 사용할 수 있도록 하는 행동 디자인패턴이다. 스프링 프레임워크 및 JAVA API 내에서도 빈번하게 찾아볼 수 있는 디자인 패턴이다. 그리고 스프링을 사용하고 있다면 빈 컨테이너를 사용하여 해당 전략패턴을 깔끔하게 적용할 수 있는데 특정 서비스의 클래스나 메소드가 과도하게 무거워 지는것을 예방할 수 있다. 2. 적용 예제 기존에 회사에서 지원하는 결제 수단이 많지 않았는데, 이번에 신규 앱 런칭과 더불어 다양한 결제 수단을 지원하게 되었다. 정산 모듈도 그에 맞추어 여러 결제수단에 따른 비지니스 로직을 소화하도록 변경해야 하는 상황이었다. 기존에 지원하던 결제 수단을 편의상 A..

• format_list_bulleted 노트/Spring
• · 2024. 1. 23.
• textsms

[수강 후기/방송통신대학] 컴퓨터과학과 2022년 1학기

시작하며 이번 학기는 최대한 꾸준한 수강에 주안점을 두고 시작했다. 방송통신대학 커리큘럼이 이론상으로는 하루에 한 과목씩 해서 1주일에 한 강의씩 진도를 나가면 소화하기 큰 무리가 없는 수준이다. 하지만 저번 학기는 그걸 못해서 강의가 밀리고, 벼락치기를 하게 되어서 기말고사 때 큰 고충을 겪었다. 이번 학기도 초반에 조금 진도가 밀리긴 했지만, 그래도 기말고사 전 약 2주 정도의 여유를 두고 수강을 마쳤고 덕분에 저번 학기보다는 여유롭게 준비를 했던 것 같다. 그리고 전공을 다섯 과목이나 채우긴 했지만, 비교적 익숙한 내용의 강의를 두 과목 정도 섞음으로써 쉬어가는 과목도 가져갔다. 그럼 이번 학기에 수강한 다음 여섯 과목에 대한 수강후기를 남겨보고자 한다. 인터넷과 정보사회 이산수학 JAVA 프로그래..

• format_list_bulleted 기록
• · 2022. 7. 10.
• textsms

[운영체제] 11. 운영체제 보안

1. 보안의 개요 1. 보호와 보안 보호란 각 프로세스가 프로세서를 점유하는 시간, 사용하는 자료, 자료가 관리되는 작업, 점유하는 장치 등을 대상으로 컴퓨터 시스템 내부 자원 각각의 영역을 보장해주는 것을 의미한다. 보안이란 원거리에서 접근하는 사용자들에 대해 인증 및 암호화 메커니즘을 통해 합법적인 처리만이 이루어지도록 하여, 시스템 내의 자료가 결함이 없도록 유지시키고 신뢰도를 유지하는 기법이다. 2. 보호 영역 컴퓨터 시스템은 시스템을 구성하는 프로세스와 객체들로 구성되어 있는데, 프로세스들은 접근권한이 부여되어 있는 자원에 대해서만 접근 가능해야 하고, 프로세스가 작업 수행을 위해 필요한 자원에만 접근할 수 있어야 한다. 이를 위해 보호영역(protection domain)의 개념을 이용한다. ..

• format_list_bulleted 노트/운영체제
• · 2022. 6. 15.
• textsms