아래 방법은 실패했다. 그 이유는 다음 글에. 아래 글은 스킵. Data migration Data를 migration하는 방법은 여러가지가 있지만 AWS Aurora로 이관하는 것이니 AWS DMS (Data Migration Service)가 가장 편해보인다. 현재 사용 중인 master RW db는 EC2 instance 하나에 postgresql을 설치한 후 3개의 database와 각 database의 owner가 서로 다른 user의 소유로 되어있다. 이를 위해 pgAdmin 4를 이용해 user와 database를 추가해준다. PgAdmin 4 DBeaver를 사용해도 되지만 난 pgAdmin 4를 사용하겠다. User 추가 새로운 user를 등록한다. General 탭에서 Name을 입력하..

개요 Postgresql을 AWS에서 사용하는 방법은 3가지가 있다. 1. EC instance에 postgresql을 설치해서 쓰는 방법 → 가장 저렴 2. AWS RDS for Postgresql 3. Aurora Postgresql 을 사용하는 방법이다. 구글링을 하면 Aurora가 RDS보다 비싸다는 글도 몇 있지만, 미국인 블로그를 보면 Aurora가 더 싸다는 글이 더 많은 듯하다. 대부분 그냥 Aurora를 사용하지만, RDS가 엔지니어가 수동으로 조절할 수 있는 부분을 전적으로 AWS에 맡기는 것이 싫어서 RDS를 쓰는 경우도 있다고 한다. 현재는 EC instance를 2개 생성하고 postgresql을 설치한 후 postgresql.conf와 pg_hba.conf를 수정하여 하나는 RW..

Environment variables https://nextjs.org/docs/app/building-your-application/configuring/environment-variables#environment-variable-load-order 위 링크를 들어가보면 어떤 .env를 우선적으로 적용하는지 설명이 되어있다. Vue나 React처럼 dotenv 패키지를 설치하고, local, dev, stage, prod로 나눌 수 있으면 좋겠는데 Next.js에서는 dev, prod, test 3가지만 기본적으로 제공해주고 있다. 일단 나는 dev를 local환경으로 쓰고, prod를 배포용 환경으로 쓰려고 한다. 추가로 세분화하고 싶다면 추가 설정이 더 필요하다. 테스트를 위해 .env.devel..

Introduction [Spring Boot Batch 설명] 게시물을 통해 구조와 설명을 확인한 후, 이 게시물에서는 Spring Boot Batch에서 성능을 최적화하기 위한 Reader를 구현하는 방법과 설명을 다루고 있습니다. 3.1. 최적화하기 위한 Reader 유형 소개 Reader는 데이터를 효율적으로 읽어오고, 처리 속도를 최적화해야 합니다. 데이터 양이 많고 복잡한 상황에서도 뛰어난 성능을 유지할 수 있도록 고려하여 Reader를 구성해야합니다. 3.1.1. 성능을 최적화하기 위한 세 가지 Reader 설명 JdbcPagingItemReader JDBC를 기반으로 하는 데이터베이스에서 페이지별로 데이터를 읽어오는 데 특화된 Reader 주로 대용량의 데이터를 처리할 때 사용되며, 페이지..

2. Spring Boot Batch 학습 이 게시물에서는 Spring Boot Batch를 작성할 때 핵심 요소 중 하나인 Reader의 다양한 유형에 대한 샘플 코드와 설명을 다루고 있습니다. 유형 sampleFileJob sampleCompositeWriterJob sampleMyBatisCursorJob sampleJdbcCursorJob sampleJdbcPagingJob 2.1. sampleFileJob sampleFileJob은 reader에 FlatFileItemReader를 사용하여 CSV 파일을 조회하는 샘플입니다 @Bean @StepScope public FlatFileItemReader sampleFileReader() { String[] names = new String[] {"n..

개인 정리용 글임. (설명 없음) Jenkins 사이트에 Maven Tool 설치 Jenkins 사이트에 접속해서 Jenkins관리 > Tools에서 Maven 설치 저 위에 Name 부분이 pipeline code(helm)에 명시한 이름과 완전히 일치해야한다. 내 pipeline 코드에 "Maven 3.6.0"이라고 적어놨는데, 이름이 띄어쓰기까지 일치해야한다. Jenkins url setting Jenkins관리 > System > Jenkins Location에서 Jenkins URL에 http://jenkins.ekcm.local 주소 입력 Pipeline code CI/CD pipeline에 사용될 코드를 사내 gitlab에 private repo를 만들어 올려놓는다. $ git remote ..