lahuman & jabsiri 노트

JPA 에서 FLUSH 처리시 실행 순서

lahuman — Fri, 30 Aug 2024 18:26:26 +0900

Hibernate는 연관된 엔터티 상태 작업의 순서대로 SQL 문을 실행하지 않습니다.

다음과 같은 코드가 있다고 예상할 경우

Person person = entityManager.find(Person.class, 1L);
entityManager.remove(person);

Person newPerson = new Person();
newPerson.setId(2L);
newPerson.setName("John Doe");
entityManager.persist(newPerson);

저희는 DELETE 질의 이후 INSERT 질의를 기대 합니다.

하지만 동작은 아래와 같습니다.

INSERT INTO Person (name, id)
VALUES ('John Doe', 2L)

DELETE FROM Person WHERE id = 1

SQL 문이 실행되는 순서는 엔티티의 상태 변화가 아닌, ActionQueue에 의해서 지정됩니다.

ActionQueue에서는 다음 순서로 모든 작업을 실행합니다 .

OrphanRemovalAction
EntityInsertAction또는EntityIdentityInsertAction
EntityUpdateAction
QueuedOperationCollectionAction
CollectionRemoveAction
CollectionUpdateAction
CollectionRecreateAction
EntityDeleteAction

만약, 꼭 삭제를 먼저 실행하고 싶다면 다음과 같이 강제로 flush를 호출 해야 합니다.

Person person = entityManager.find(Person.class, 1L);
entityManager.remove(person);
entityManager.flush(); // 강제 flush로 SQL 실행 

Person newPerson = new Person();
newPerson.setId(2L);
newPerson.setName("John Doe");
entityManager.persist(newPerson);

마치며

이 부분을 잘 이해 못해서 삽질을 오래 하였습니다.

강제로 flush 하기 보다 OrphanRemovalAction 를 활용하여 처리 하는게 좋게 보여지기도 합니다.

참고 자료

6.5. Flush operation order

Python 3.12 설치시 Openssl 모듈 버전 확인이 필요 합니다.

lahuman — Mon, 5 Aug 2024 18:15:56 +0900

Python 3.12을 설치할 때 발생할 수 있는 오류 중 하나는 SSL 인증서와 관련된 문제입니다. 특히, pip 설치 시 다음과 같은 오류를 만날 수 있습니다:

Could not fetch URL https://pypi.org/simple/pip/: There was a problem confirming the ssl certificate: HTTPSConnectionPool(host='pypi.org', port=443): Max retries exceeded with url: /simple/pip/ (Caused by SSLError("Can't connect to HTTPS URL because the SSL module is not available.")) - skipping

이 오류는 Python 설치 시 SSL 모듈이 제대로 구성되지 않았기 때문에 발생합니다. Python 3.12 설치 후 SSL 모듈이 제대로 작동하는지 확인하는 것이 중요합니다.

다음은 AWSLinux 기반의 Docker Container 설치시 명령어입니다.

from amazonlinux # 1

RUN  yum update --security --bugfix -y # 2

RUN yum groupinstall "Development Tools" -y # 3
RUN yum install openssl11 openssl11-devel  libffi-devel bzip2-devel wget -y # 3 + opnessl 1.1.1 설치
# 4
WORKDIR /usr/src
RUN wget https://www.python.org/ftp/python/3.12.2/Python-3.12.2.tgz 
RUN  tar xzf Python-3.12.2.tgz 

# 5 
WORKDIR /usr/src/Python-3.12.2
RUN ./configure --enable-optimizations
RUN make -j 8
RUN make altinstall

RUN python3.12 --version # 6

# 7
RUN curl https://bootstrap.pypa.io/get-pip.py -o get-pip.py
RUN python3.12 get-pip.py  --trusted-host=files.pythonhosted.org --trusted-host=pypi.org
RUN pip3.12 --version

# 8 
RUN ln -s /usr/local/bin/python3.12 /usr/bin/python3 & \
    ln -s /usr/local/bin/pip3 /usr/bin/pip3

# 9
# datetime zone setting
RUN date
RUN mv /etc/localtime /etc/localtime_org
RUN ln -s /usr/share/zoneinfo/Asia/Seoul /etc/localtime
RUN date

Dockerfile은 다음 작업을 수행합니다

Amazon Linux 이미지를 사용하여 Docker 컨테이너를 생성합니다.
보안 및 버그 수정 업데이트를 수행합니다.
개발 도구 및 필요한 라이브러리를 설치합니다.
Python 3.12 소스 코드를 다운로드하고 압축을 해제합니다.
Python 3.12를 OpenSSL 지원과 함께 구성하고 컴파일합니다.
Python 및 Pip의 버전을 확인하여 설치가 올바르게 되었는지 검증합니다.
pip를 설치 하고 올바르게 설치 되었는지 검증합니다.
Python과 Pip에 대한 심볼릭 링크를 생성하여 /usr/bin 디렉토리에서 사용할 수 있도록 설정합니다.
시간대를 설정하여 시스템 시간대를 Asia/Seoul로 변경합니다.

이 Dockerfile을 사용하면 Python 3.12와 Pip을 포함한 개발 환경을 AWS Linux 기반의 Docker 컨테이너에서 설정할 수 있습니다.

참고 자료

Python 3.12의 SSL 모듈에 대한 더 자세한 내용은 공식 문서를 참고하세요. 이 문서에는 SSL 모듈의 다양한 기능과 설정 방법이 자세히 설명되어 있습니다.

spring jpa 사용시 페이징 처리

lahuman — Thu, 1 Aug 2024 18:15:08 +0900

게시글 목록 기능에서 페이징 처리는 단순하지만 많이 사용되는 기능입니다.

주요 항목

요청 값 : 조회 하려는 페이지 위치, 페이지에서 필요로 하는 게시글 수, 추가로 검색 조건
응답 값 : 게시글 목록, 페이지 네비게이션을 위한 총 게시글 수

구현 방법

이를 일일이 구현 하기 보다 jpa에서 지원하는 Pageable 와 Page 라이브러리를 사용하면 간단한게 처리 됩니다.

예제 코드

// Controller
import org.springframework.data.domain.Page
import org.springframework.data.domain.Pageable
import org.springframework.web.bind.annotation.GetMapping
import org.springframework.web.bind.annotation.RequestParam
import org.springframework.web.bind.annotation.RestController

@RestController
class Controller(private val service: ContentsService) {
    @GetMapping("/list")
    fun getList(
        @PageableDefault(page = 0, size = 10) pageable: Pageable
    ): Page<TipContents> {
        return contentsService.getList(pageable)
    }
}

// Service
import org.springframework.data.domain.Page
import org.springframework.data.domain.Pageable
import org.springframework.stereotype.Service

@Service
class ContentsService(private val repository: ContentsRepository) {
    fun getTipContents(pageable: Pageable): Page<Contents> {
        return repository.findAll(pageable)
    }
}

// Repository
import org.springframework.data.domain.Page
import org.springframework.data.domain.Pageable
import org.springframework.data.jpa.repository.JpaRepository
import org.springframework.data.jpa.repository.Query
import org.springframework.data.repository.query.Param

interface TipContentsRepository : JpaRepository<Contents, Long> {
    fun findAll(
        pageable: Pageable
    ): Page<Contents>
}

@Query 사용 예제 추가

필요시 사용자 정의 SQL을 사용할 경우 다음과 같이 @Query를 활용하여도 동일하게 페이징 처리가 됩니다.

// Repository
import org.springframework.data.domain.Page
import org.springframework.data.domain.Pageable
import org.springframework.data.jpa.repository.JpaRepository
import org.springframework.data.jpa.repository.Query
import org.springframework.data.repository.query.Param

interface TipContentsRepository : JpaRepository<Contents, Long> {
    @Query(
        """
        SELECT 
            C.ID,
            C.TIP_TITLE,
            C.IMG_FILE_PATH ,
            C.PET_DCD,
            C.OPN_DT ,
            C.REG_DTM ,
            C.MOD_DTM
            '' as TIP_TXT // entity의 필수 값은 무조건 있어야 오류가 발생하지 않습니다. 
        FROM CONTENTS C
           WHERE (C.PET_DCD != :notPetDcd OR C.PET_DCD = 'ALL') 
           AND  C.id IN (
	           SELECT t.CONTENTS_M_ID 
	           FROM CATEGORY t
	           WHERE t.CTGY_CCD IN (:ctgyCcds)
           ) 
           AND OPN_DT <= TO_CHAR(sysdate, 'YYYYMMDD')
        ORDER BY OPN_DT DESC
    """,
    countQuery = """
        SELECT 
            COUNT(C.ID)
        FROM CONTENTS TCM
           WHERE (C.PET_DCD != :notPetDcd OR C.PET_DCD = 'ALL') 
           AND  TCM.id IN (
	           SELECT tcd.CONTENTS_M_ID 
	           FROM CATEGORY t
	           WHERE t.CTGY_CCD IN (:ctgyCcds)
           ) 
           AND OPN_DT <= TO_CHAR(sysdate, 'YYYYMMDD')
    """,
    nativeQuery = true
    )
    fun findByPetDcdAndCtgyCcds(
        @Param("notPetDcd") notPetDcd: String,
        @Param("ctgyCcds") ctgyCcds: List<String>,
        pageable: Pageable
    ): Page<TipContentsM>
}

참고 자료

[배워보자 Spring Data JPA] JPA 에서 Pageable 을 이용한 페이징과 정렬

kotlin operator invoke 로 데이터 검증 하기!

lahuman — Tue, 30 Jul 2024 18:14:29 +0900

상황 설명

Price의 경우 0원 생성할 수 없지만, 시작값을 위해서는 1개는 존재 해야 합니다.

이를 어떻게 처리 할까 고민했었는데 아래와 같은 해법이 있네요.

코드 구현

data class Price private constructor (private val value: Double) { // 생성자를 비공개로 처리
    override fun toString() = value.toString()
    operator fun plus(price: Price) = Price(this.value + price.value)
    operator fun times(num: Int) = Price(this.value * num)
    
    companion object {
        val identity = Price(0.0) // 0원 구현 private constructor 이기 때문에 외부에서는 생성 못함 
        // 생성시 호출되는 invoke 함수를 companion으로만 제공 
	    operator fun invoke(value: Double) = 
            if (value > 0)
                Price(value)
            else 
                throw IllegalArgumentException("Price must be positive or null")
	
    }
}

fun main() {
    println(Price.identity) // 0.0 출력
    println(Price(5.0) + Price(4.8)) // 9.8 출력
    println(Price(5.0) * 3) // 15.0 출력
    println(Price(-0.0)) // Exception in thread "main" java.lang IllegalArgumentException: Price must be positive or null

    println(Price(3.12) * 3.2) // The floating-point literal does not conform to the expected type Int

    println(Price(5.0) * Price(4.8)) // Type mismatch: inferred type is Price but Int was expected

    println(Price(5.0) - 3) // Unresolved reference. None of the following candidates is applicable because of receiver type mismatch: public inline operator fun BigDecimal.minus(other: BigDecimal):
}

operator plus, times 를 구현해서 위와 같이 사용 할 수 있습니다.

operator 종류

산술 연산자

| 함수 이름 | 연산자 | 설명 | |———–|——–|———-| | plus | + | 더하기 | | minus | - | 빼기 | | times | * | 곱하기 | | div | / | 나누기 | | rem | % | 나머지 연산 |

예제 코드

data class Price (private val value: Double) { 
    operator fun plus(price: Price) = Price(this.value + price.value)
    operator fun times(num: Int) = Price(this.value * num)
}
fun main() {
    println(Price(5.0) + Price(4.8))
    println(Price(5.0) * 3)
}

대입 연산자

함수 이름연산자설명

plusAssign	+=	더해서 대입
minusAssign	-=	빼서 대입
timesAssign	*=	곱해서 대입
divAssign	/=	나눠서 대입

예제 코드

data class Price(private var value: Double) {
    operator fun plusAssign(price: Price) {
        this.value += price.value
    }
}

fun main() {
    val p1 = Price(5.0)
    val p2 = Price(4.8)

    p1 += p2

    println(p1) // Output: Price(value=9.8)
}

단항 연산자

함수 이름연산자설명 - object가 변수명

unaryPlus	+	+object
unaryMinus	-	-object
not	!	!object
inc	++	++object
dec	–	–object

예제 코드

data class Price(private var value: Double) {
    operator fun inc(): Price {
        value++
        return this
    }

    operator fun dec(): Price {
        value--
        return this
    }
}

fun main() {
    var p1 = Price(5.0)

    println("Original p1: $p1")

    p1++
    println("After incrementing: $p1")

    p1--
    println("After decrementing: $p1")
}

참고 자료

코틀린을 다루는 기술

spring-boot with logback

lahuman — Fri, 26 Jul 2024 17:32:39 +0900

spring-boot 에서 초기화 오류시 로그 표기 방법

현상 : spring-boot 초기화 중 오류 발생시 log가 명확하게 표시 되지 않고 종료 오류 발생
원인 : logback을 사용하고 있고, 설정 파일명을 logback.xml로 사용중
해결 방안 : logback.xml 을 logback-spring.xml 으로 변경

26.7 Logback Extensions 를 확인하면, logback.xml을 사용하면 너무 빠르게 로딩 되어서 spring 오류가 출력 안되는 경우가 발생 할 수 있다고 합니다.

참고 자료

83. Logging

java ArrayList의 동작

lahuman — Mon, 22 Jul 2024 17:31:55 +0900

테스트용 코드 전체

import java.lang.reflect.Field

fun main() {
//    val list = MutableList<String?>(1000) { null } // 초기 크기 설정
    val list = mutableListOf<Int>()
    println("list size : ${list.size} / list capacity:: ${getCapacity(list)}") // # 1 초기 생성
    for ( i in 0..25) {
        list.add(i+1)
        println("list size : ${list.size} / list capacity:: ${getCapacity(list)}") // # 2 출력
    }
}
// arraylist의 capacity 출력 
fun getCapacity(arrayList: List<*>?): Int {
    if (arrayList == null) {
        return 0
    }
    val field: Field = ArrayList::class.java.getDeclaredField("elementData")
    field.isAccessible = true

    return (field.get(arrayList) as Array<*>).size
}

결과 값

list size : 0 / list capacity:: 0 // #1
list size : 1 / list capacity:: 10 // capacity 변화
list size : 2 / list capacity:: 10
list size : 3 / list capacity:: 10
list size : 4 / list capacity:: 10
list size : 5 / list capacity:: 10
list size : 6 / list capacity:: 10
list size : 7 / list capacity:: 10
list size : 8 / list capacity:: 10
list size : 9 / list capacity:: 10
list size : 10 / list capacity:: 10
list size : 11 / list capacity:: 15 // capacity 변화
list size : 12 / list capacity:: 15
list size : 13 / list capacity:: 15
list size : 14 / list capacity:: 15
list size : 15 / list capacity:: 15
list size : 16 / list capacity:: 22 // capacity 변화
list size : 17 / list capacity:: 22
list size : 18 / list capacity:: 22
list size : 19 / list capacity:: 22
list size : 20 / list capacity:: 22
list size : 21 / list capacity:: 22
list size : 22 / list capacity:: 22
list size : 23 / list capacity:: 33 // capacity 변화
list size : 24 / list capacity:: 33
list size : 25 / list capacity:: 33
list size : 26 / list capacity:: 33

설명

ArrayList는 List 인터페이스를 구현한 동적 배열입니다. 내부적으로는 배열을 사용하여 요소를 저장하며, 필요에 따라 크기를 조절할 수 있습니다.

최초에 리스트를 생성하면, 크기와 용량 모두 0입니다.
요소를 추가할 때마다 용량이 증가합니다. 용량이 모두 차면 새로운 배열을 생성하고 기존 데이터를 복사합니다.

동작 예시

최초 list를 생성하고, size와 capacity를 확인하면 0 / 0
list에 처음 데이터를 add 할 경우, size / capacity 는 1 / 10
list에 2번째 데이터를 add
list에 10번째 데이터를 add
list에 11번째 데이터를 add 하면 새로운 배열을 생성하고, 기존 데이터를 아래와 같이 복사

참고 자료

Gmail SMTP 설정 가이드

lahuman — Wed, 17 Jul 2024 17:30:03 +0900

2024년 기준, Gmail SMTP 설정 가이드

2010년에 Gmail SMTP 설정을 간단하게 했던 기억이 있으신가요? 2022년 기준으로 설정 방식이 변경되었고, 다소 복잡해졌습니다. 이 글을 통해 2024년 기준 Gmail SMTP 설정 방법을 단계별로 알려드리겠습니다.

GMAIL 설정 진행

GMAIL > 톱니바퀴 > 모든 설정 보기
설정 > 전달 및 POP/IMAP

APP PASSWORD 추가

이 메뉴가 검색시 계정 > 보안 > 2단계 인증에 있다고 되어 있지만, 실제로 보이지 않고 주소 입력을 통해 접근해야 합니다.

https://myaccount.google.com/security 에서 2-step verification 밑에 app password 메뉴가 존재 하지 않습니다.
https://myaccount.google.com/apppasswords 로 직접 접근해서 추가 하면 됩니다.

이렇게 수정하고 나면 GMAIL SMTP를 사용할 수 있습니다.

다음은 사용 예제 입니다.

위 화면에서

username : xxx@gmail.com
password : app password

이렇게 설정 하면 됩니다.

참고자료

ubuntu의 nginx의 ssl 인증서 설치

lahuman — Tue, 9 Jul 2024 17:29:20 +0900

Let’s Encrypt를 사용하여 HTTPS 자동 구성

Certbot, Let’s Encrypt 및 ACME(자동 인증서 관리 환경) 프로토콜의 목적은 HTTPS 서버를 설정하고 사람의 개입 없이 브라우저에서 신뢰할 수 있는 인증서를 자동으로 얻을 수 있도록 하는 것입니다. 이는 웹 서버에서 인증서 관리 에이전트를 실행하여 수행됩니다.

설치 & 설정 & 실행 명령어

# 설치
$ sudo snap install --classic certbot
certbot 2.10.0 from Certbot Project (certbot-eff✓) installed

$ sudo ln -s /snap/bin/certbot /usr/bin/certbot

# 설정
$ sudo certbot --nginx
Saving debug log to /var/log/letsencrypt/letsencrypt.log
Enter email address (used for urgent renewal and security notices)
 (Enter 'c' to cancel): lahuman@daum.net

- - - - - - - - - - - - - - - - - - - - - - - - - - - - - - - - - - - - - - - -
Please read the Terms of Service at
https://letsencrypt.org/documents/LE-SA-v1.4-April-3-2024.pdf. You must agree in
order to register with the ACME server. Do you agree?
- - - - - - - - - - - - - - - - - - - - - - - - - - - - - - - - - - - - - - - -
(Y)es/(N)o: y

- - - - - - - - - - - - - - - - - - - - - - - - - - - - - - - - - - - - - - - -
Would you be willing, once your first certificate is successfully issued, to
share your email address with the Electronic Frontier Foundation, a founding
partner of the Let's Encrypt project and the non-profit organization that
develops Certbot? We'd like to send you email about our work encrypting the web,
EFF news, campaigns, and ways to support digital freedom.
- - - - - - - - - - - - - - - - - - - - - - - - - - - - - - - - - - - - - - - -
(Y)es/(N)o: y
Account registered.

Which names would you like to activate HTTPS for?
We recommend selecting either all domains, or all domains in a VirtualHost/server block.
- - - - - - - - - - - - - - - - - - - - - - - - - - - - - - - - - - - - - - - -
1: lahuman.zapto.org
- - - - - - - - - - - - - - - - - - - - - - - - - - - - - - - - - - - - - - - -
Select the appropriate numbers separated by commas and/or spaces, or leave input
blank to select all options shown (Enter 'c' to cancel):
Requesting a certificate for lahuman.zapto.org

Successfully received certificate.
Certificate is saved at: /etc/letsencrypt/live/lahuman.zapto.org/fullchain.pem
Key is saved at:         /etc/letsencrypt/live/lahuman.zapto.org/privkey.pem
This certificate expires on 2024-07-07.
These files will be updated when the certificate renews.
Certbot has set up a scheduled task to automatically renew this certificate in the background.

Deploying certificate
Successfully deployed certificate for lahuman.zapto.org to /etc/nginx/sites-enabled/default
Congratulations! You have successfully enabled HTTPS on https://lahuman.zapto.org

- - - - - - - - - - - - - - - - - - - - - - - - - - - - - - - - - - - - - - - -
If you like Certbot, please consider supporting our work by:
 * Donating to ISRG / Let's Encrypt:   https://letsencrypt.org/donate
 * Donating to EFF:                    https://eff.org/donate-le
- - - - - - - - - - - - - - - - - - - - - - - - - - - - - - - - - - - - - - - -

# nginx 설정 확인 및 재실행
$ sudo nginx -t
nginx: the configuration file /etc/nginx/nginx.conf syntax is ok
nginx: configuration file /etc/nginx/nginx.conf test is successful

$ sudo nginx -r reload

마치며

생각보다 설정이 쉬워서 이렇게만 하면 된다고 하고 놀랐네요. :)

참고 자료

Install certbot on Ubuntu

spring boot jar 파일 실행시 application.yml 주입 하기

lahuman — Fri, 5 Jul 2024 17:27:57 +0900

spring boot 실행시 설정 파일 외부 주입 방법

실행 명령어를 이용한 주입

$ java -jar app.jar --spring.config.location=file:///Users/home/config/jdbc.properties

디렉토리 기반 주입

$ java -jar app.jar --spring.config.name=application,jdbc --spring.config.location=file:///Users/home/config

마치며

다른 여러가지 방법이 있지만 위의 2가지 방법으로 대부분 처리가 가능합니다.

참고자료

Spring Properties File Outside jar

lahuman & jabsiri 노트

JPA 에서 FLUSH 처리시 실행 순서

Hibernate는 연관된 엔터티 상태 작업의 순서대로 SQL 문을 실행하지 않습니다.

마치며

참고 자료

Python 3.12 설치시 Openssl 모듈 버전 확인이 필요 합니다.

Dockerfile은 다음 작업을 수행합니다

참고 자료

spring jpa 사용시 페이징 처리

주요 항목

구현 방법

예제 코드

@Query 사용 예제 추가

참고 자료

kotlin operator invoke 로 데이터 검증 하기!

상황 설명

코드 구현

operator 종류

산술 연산자

예제 코드

대입 연산자

예제 코드

단항 연산자

예제 코드

참고 자료

spring-boot with logback

spring-boot 에서 초기화 오류시 로그 표기 방법

참고 자료

java ArrayList의 동작

테스트용 코드 전체

결과 값

설명

동작 예시

참고 자료

Gmail SMTP 설정 가이드

2024년 기준, Gmail SMTP 설정 가이드

GMAIL 설정 진행

APP PASSWORD 추가

참고자료

최신 JDK 21과 Kotlin 1.9.22 조합에서 발견된 오류 및 주의 사항

참고자료

ubuntu의 nginx의 ssl 인증서 설치

Let’s Encrypt를 사용하여 HTTPS 자동 구성

설치 & 설정 & 실행 명령어

마치며

참고 자료

spring boot jar 파일 실행시 application.yml 주입 하기

spring boot 실행시 설정 파일 외부 주입 방법

실행 명령어를 이용한 주입

디렉토리 기반 주입

마치며

참고자료