TCP/IP
커넥션을 연결한다. 물론 이 과정에서 3 way handshake 같은 TCP/IP
연결을 위한 네트워크 동작이 발생한다.TCP/IP
커넥션이 연결되면 ID, PW와 기타 부가정보를 DB에 전달한다.TCP/IP
커넥션을 새로 생성하기 위한 리소스를 매번 사용한다. 참고로, DB를 콜하는 것은 전부 돈이다.커넥션 풀의 사이즈를 늘리는 것이 아니라 줄여야 한다?
만 명의 사용자들이 빈번하게 접속해서 DB 요청을 발생시키는 사이트가 있다고 가정하자. 초당 2만 개의 트랜잭션이 발생한다면 커넥션 풀의 크기는 어느 정도여야 할까?
핵심은 얼마나 작아야 하는지에 있다.
하나의 CPU 코어를 지닌 컴퓨터는 '동시에' 수십 수백 개의 스레드를 지원할 수 있다. 그렇지만 이것은 시분할(time-slicing) 기법을 활용한 운영체제의 눈속임으로, 실제로는 하나의 코어는 한 번에 단 하나의 스레드만을 실행할 수 있다.
그렇다면 하나의 코어에 하나의 커넥션만 생성하면 되지 않나?
실행중이던 스레드가 다른 스레드로 바뀌는 컨텍스트 스위칭 비용을 고려하면 이게 맞는 것 같다.
하지만 실제로는 네트워크와 디스크를 사용하는 동안 해당 스래드가 block되기 때문에 다른 작업을 할 수 없고, 따라서 성능 저하가 일어난다.
그러니 Connection Pool Size는 CPU 코어의 개수보다는 큰 것이 좋다.
그래서 적절한 커넥션 풀의 개수는 몇 개?
스프링 프레임워크에서 보편적으로 사용되는 HikariCP 가 제안하는 크기는 다음과 같다.
connection=(core_count∗2)+effective_spindle_count
core_count: CPU의 코어수
effective_spindle_count: DB서버가 동시 관리할 수 있는 IO 개수
commons-dbcp2
, tomcat-jdbc pool
, HikariCP
등이 있다.hikariCP
를 주로 사용한다. 스프링 부트 2.0 부터는 기본 커넥션 풀로 hikariCP
를 제공한다. 성능, 사용의 편리함, 안전성 측면에서 이미 검증이 되었기 때문에 커넥션 풀을 사용할 때는 고민할 것 없이 hikariCP
를 사용하면 된다. 실무에서도 레거시 프로젝트가 아닌 이상 대부분hikariCP
를 사용한다.커넥션을 획득하는 법은 다양하다. 이전에 JDBC로 개발한 어플리케이션처럼
DriverManager
를 통해서 커넥션을 획득하다가,hikariCP
같은 커넥션 풀을 사용하는 방법으로 변경하려면 어떻게 해야할까?
어플리케이션 코드도 함께 변경해야 한다. 의존관계가DriverManager
에서HikariCP
로 변경되기 때문이다. 물론 둘의 사용법도 조금씩 다를 것이다.
의존 관계를 해결하기 위해 종종 등장하는 법이 있다. 바로 추상화이다.
javax.sql.DataSource
라는 인터페이스를 제공한다.DataSource
는 커넥션을 획득하는 방법을 추상화 하는 인터페이스이다.DataSource
인터페이스에만 의존하면 된다. 덕분에 DriverManagerDataSource
를 통해서 DriverManager
를 사용 하다가 커넥션 풀을 사용하도록 코드를 변경해도 애플리케이션 로직은 변경하지 않아도 된다.package hello.jdbc.connection;
import com.zaxxer.hikari.HikariDataSource;
import lombok.extern.slf4j.Slf4j;
import org.junit.jupiter.api.Test;
import org.springframework.jdbc.datasource.DriverManagerDataSource;
import javax.sql.DataSource;
import java.sql.Connection;
import java.sql.DriverManager;
import java.sql.SQLException;
import static hello.jdbc.connection.ConnectionConst.*;
@Slf4j
public class ConnectionTest {
/**
* DriveManager 를 이용한 커넥션 얻기 : 예전 방식
* 커넥션을 획득할 때마다 파라미터를 줘야 함.
*/
@Test
void driverManager() throws SQLException {
Connection con1 = DriverManager.getConnection(URL, USERNAME, PASSWORD);
Connection con2 = DriverManager.getConnection(URL, USERNAME, PASSWORD);
log.info("connection={}, class={}", con1, con1.getClass());
log.info("connection={}, class={}", con2, con2.getClass());
}
/**
* DatasourceDriveManager 를 이용한 커넥션 얻기 : 스프링이 제공한다.
* 처음 객체를 생성할 때만 필요한 파라미터를 넘기고, 커넥션이 필요할 때는 단순히 dataSource.getConnection() 만 호출
* 설정과 사용의 분리 : DataSource 가 만들어지는 시점에 필요한 데이터를 모두 넘겨두면, 사용하는 곳(Repository)에서는 이러한 속성에 의존하지 않아도 된다.
*/
@Test
void dataSourceDriveManager() throws SQLException {
DriverManagerDataSource dataSource = new DriverManagerDataSource(URL, USERNAME, PASSWORD); // 설정
useDataSource(dataSource); // 사용
}
private void useDataSource(DataSource dataSource) throws SQLException {
Connection con1 = dataSource.getConnection();
Connection con2 = dataSource.getConnection();
log.info("connection={}, class={}", con1, con1.getClass());
log.info("connection={}, class={}", con2, con2.getClass());
}
}
@Test
void dataSourceConnectionPool() throws SQLException, InterruptedException {
HikariDataSource dataSource = new HikariDataSource();
dataSource.setJdbcUrl(URL);
dataSource.setUsername(USERNAME);
dataSource.setPassword(PASSWORD);
dataSource.setMaximumPoolSize(10);
dataSource.setPoolName("MyPool");
useDataSource(dataSource);
Thread.sleep(1000); // 커넥션 풀에서 커넥션 생성 시간 대기
}
HikariDataSource
는 DataSource
인터페이스를 구현하고 있다.MyPool
이라고 지정했다.Thread.sleep
을 통해 대기 시간을 주어야 쓰레드 풀에 커넥션이 생성되는 다음 로그를 확인할 수 있다.HikariCP
관련 설정을 확인할 수 있다. 풀의 이름( MyPool
)과 최대 풀 수( 10
)을 확인할 수 있다.10
)까지 채운다.active=2
, 풀에서 대기 상태인 커넥션 idle=8
을 확인할 수 있다.MyPool - After adding stats (total=10, active=2, idle=8, waiting=0)
package hello.jdbc.repository;
import hello.jdbc.connection.DBConnectionUtil;
import hello.jdbc.domain.Member;
import lombok.extern.slf4j.Slf4j;
import org.springframework.jdbc.support.JdbcUtils;
import javax.sql.DataSource;
import java.sql.*;
import java.util.NoSuchElementException;
/**
* JDBC - DataSource 사용해서 커넥션 얻기, JdbcUtils 사용
*/
@Slf4j
public class MemberRepositoryV1 {
private final DataSource dataSource;
public MemberRepositoryV1(DataSource dataSource) {
this.dataSource = dataSource;
}
// save()...
// findById()...
// update()...
// delete()...
private void close(Connection con, Statement stmt, ResultSet rs) {
JdbcUtils.closeResultSet(rs);
JdbcUtils.closeStatement(stmt);
JdbcUtils.closeConnection(con);
}
private Connection getConnection() throws SQLException {
Connection con = dataSource.getConnection();
log.info("getConnection={}, class={}", con, con.getClass());
return con;
}
}
DataSource
의존관계 주입DataSource
를 주입 받아서 사용한다. 이제 직접 만든 DBConnectionUtil
을 사용하지 않아도 된다.DataSource
는 표준 인터페이스 이기 때문에 DriverManagerDataSource
에서 HikariDataSource
로 변경되어도 해당 코드를 변경하지 않아도 된다.JdbcUtils
편의 메서드JdbcUtils
라는 편의 메서드를 제공한다. JdbcUtils
을 사용하면 커넥션을 좀 더 편리하게 닫을 수 있다.package hello.jdbc.repository;
import com.zaxxer.hikari.HikariDataSource;
import hello.jdbc.domain.Member;
import lombok.extern.slf4j.Slf4j;
import org.assertj.core.api.Assertions;
import org.junit.jupiter.api.BeforeEach;
import org.junit.jupiter.api.Test;
import org.springframework.jdbc.datasource.DriverManagerDataSource;
import javax.sql.DataSource;
import java.sql.SQLException;
import java.util.NoSuchElementException;
import static hello.jdbc.connection.ConnectionConst.*;
import static org.assertj.core.api.Assertions.assertThat;
import static org.assertj.core.api.Assertions.assertThatThrownBy;
@Slf4j
class MemberRepositoryV1Test {
MemberRepositoryV1 repository;
@BeforeEach
void beforeEach() {
// 기본 DriverManager - 항상 새로운 커넥션을 획득 : 속도가 느림(성능 저하) -> 아래의 Connection Pooling 으로!
// DriverManagerDataSource dataSource = new DriverManagerDataSource(URL, USERNAME, PASSWORD);
// Connection Pooling
HikariDataSource dataSource = new HikariDataSource();
dataSource.setJdbcUrl(URL);
dataSource.setUsername(USERNAME);
dataSource.setPassword(PASSWORD);
repository = new MemberRepositoryV1(dataSource);
}
@Test
void crud() throws SQLException {
// save
Member member = new Member("memberV2", 10000);
repository.save(member);
// findById
Member findMember = repository.findById(member.getMemberId());
log.info("findMember={}", findMember);
Assertions.assertThat(findMember).isEqualTo(member);
// update
repository.update(member.getMemberId(), 20000);
Member updatedMember = repository.findById(member.getMemberId());
assertThat(updatedMember.getMoney()).isEqualTo(20000);
// delete
repository.delete(member.getMemberId());
assertThatThrownBy(() -> repository.findById(member.getMemberId())).isInstanceOf(NoSuchElementException.class);
try {
Thread.sleep(1000);
} catch (InterruptedException e) {
e.printStackTrace();
}
}
}
DriverManagerDataSource
를 사용하면 conn0~5
번호를 통해서 항상 새로운 커넥션이 생성되어서 사용 되는 것을 확인할 수 있다.conn0
커넥션이 재사용 된 것을 확인할 수 있다.conn0
만 사용된다.