CS/MySQL

MySQL 엔진 아키텍처 / 스레딩 구조 / 메모리 할당 및 구조 / 컴포넌트

JWonK 2023. 6. 23. 03:19
728x90
반응형

MySQL 서버는 사람의 머리 역할을 담당하는 MySQL 엔진과 손발 역할을 담당하는 스토리지 엔진으로 구분할 수 있다.

스토리지 엔진은 기본으로 제공되는 InnoDB 스토리지 엔진 / MyISAM 스토리지 엔진으로 구분된다.

 

 

▶ MySQL 엔진 아키텍처


MySQL의 쿼리를 작성하고 튜닝할 때 필요한 기본적인 MySQL 엔진의 구조를 훑어본다.

 

 

MySQL 엔진 아키텍처

MySQL 서버는 크게 MySQL 엔진 / 스토리지 엔진으로 구분

위 아키텍처에 존재하는 여러 구성 요소들을 아래에서 하나 하나 살펴봄

 

 

 

 

 

 

 

▶ MySQL 엔진


  • MySQL 엔진은 클라이언트로부터의 접속 및 쿼리 요청을 처리하는 커넥션 핸들러와 SQL 파서 및 전처리기, 쿼리의 최적화된 실행을 위한 옵티마이저가 중심을 이룸
  • 또한 MySQL은 표준 SQL(ANSISQL)문법을 지원하기 때문에 표준 문법에 따라 작성된 쿼리는 타 DBMS와 호환되어 실행 가능

 

 

 

▶ 스토리지 엔진


  • MySQL 엔진은 요청된 SQL 문장을 분석하거나 최적화하는 등 DBMS의 두뇌에 해당하는 처리를 수행하고, 실제 데이터를 디스크 스토리지에 저장하거나 디스크 스토리지로부터 데이터를 읽어오는 부분은 스토리지 엔진이 전담한다.
  • MySQL 서버에서 MySQL 엔진은 하나지만 스토리지 엔진은 여러 개를 동시에 사용할 수 있다.
  • 각 스토리지 엔진은 성능 향상을 위해 키 캐시(MyISAM 스토리지 엔진)나 InnoDB 버퍼 풀(Inno DB 스토리지 엔진)과 같은 기능을 내장하고 있다.

 

 

 

 

▶ 핸들러 API


  • MySQL 엔진의 쿼리 실행기에서 데이터를 쓰거나 읽어야 할 때는 각 스토리지 엔진에 쓰기 또는 읽기를 요청하는데, 이러한 요청을 핸들러(Handler) 요청이라 하고, 여기서 사용되는 API를 핸들러 API라고 한다.

 

 

 

 

▶ MySQL 스레딩 구조


MySQL 스레딩 구조

  • MySQL 서버는 프로세스 기반이 아니라 스레드 기반으로 작동
  • 크게 포그라운드(Foreground)스레드와 백그라운드(Background) 스레드로 구분될 수 있다.
  • 백그라운드 스레드의 개수는 MySQL 서버의 설정 내용에 따라 가변적이다.
  • 동일한 이름의 스레드가 2개 이상씩 보이는 것은 MySQL 서버의 설정 내용에 의해 여러 스레드가 동일 작업을 병렬로 처리하는 경우

 

 

 

 

 

▶ 포그라운드 스레드(클라이언트 스레드)


  • 포그라운드 스레드는 최소한 MySQL 서버에 접속된 클라이언트의 수만큼 존재하며, 주로 각 클라이언트 사용자가 요청하는 쿼리 문장을 처리
  • 클라이언트 사용자가 작업을 마치고 커넥션을 종료하면 해당 커넥션을 담당하던 스레드는 다시 스레드 캐시(Thread cache)로 되돌아간다.
  • 이 때 이미 스레드 캐시에 일정 개수 이상의 대기 중인 스레드가 있으면 스레드 캐시에 넣지 않고 스레드를 종료시켜 일정개수의 스레드만 스레드 캐시에 존재하게 한다.

 

  • 포그라운드 스레드는 데이터를 MySQL의 데이터 버퍼나 캐시로부터 가져오며, 버퍼나 캐시에 없는 경우에는 직접 디스크의 데이터나 인덱스 파일로부터 데이터를 읽어와서 작업을 처리한다.
  • MyISAM 테이블은 디스크 쓰기 작업까지 포그라운드 스레드가 처리하지만 InnoDB 테이블은 데이터 버퍼나 캐시까지만 포그라운드 스레드가 처리하고, 나머지 버퍼로부터 디스크까지 기록하는 작업은 백그라운드 스레드가 처리

 

 

 

 

 

 

▶ 백그라운드 스레드


MyISAM의 경우에는 별로 해당 사항이 없는 부분이지만 InnoDB는 다음과 같이 여러 가지 작업이 백그라운드로 처리된다.

 

  • 인서트 버퍼(Insert Buffer)를 병합하는 스레드
  • 로그를 디스크로 기록하는 스레드
  • InnoDB 버퍼 풀의 데이터를 디스크에 기록하는 스레드
  • 데이터를 버퍼로 읽어 오는 스레드
  • 잠금이나 데드락을 모니터링하는 스레드

 

사용자의 요청을 처리하는 도중 데이터의 쓰기 작업은 지연(버퍼링)되어 처리될 수 있지만 데이터의 읽기 작업은 절대 지연될 수 없다.

 

 

 

 

 

 메모리 할당 및 사용 구조


MySQL 메모리 사용 및 할당 구조

  • 글로벌 메모리 영역과 로컬 메모리 영역으로 구분되며 운영체제로부터 할당 됨

 

 

 

 

 

 

 

 

 글로벌 메모리 영역


일반적으로 클라이언트 스레드의 수와 무관하게 하나의 메모리 공간만 할당. 필요에 따라 N개까지 가능하지만 모든 스레드에 의해 공유됨

 

대표적인 글로벌 메모리 영역

 

  • 테이블 캐시
  • InnoDB 버퍼 풀
  • InnoDB 어댑티브 해시 인덱스
  • InnoDB 리두 로그 버퍼

 

 

 

 

 

로컬 메모리 영역 (세션 메모리 영역)


  • MySQL 서버상에 존재하는 클라이언트 스레드가 쿼리를 처리하는데 사용하는 메모리 영역
  • 구성 요소는 위 그림 참고
  • 클라이언트가 MySQL 서버에 접속하면 MySQL 서버에서는 클라이언트 커넥션으로부터의 요청을 처리하기 위해 스레드를 하나씩 할당하게 되는데, 클라이언트 스레드가 사용하는 메모리 공간이라고 해서 클라이언트 메모리 영역이라고도 한다.
  • 로컬 메모리는 각 클라이언트 스레드별로 독립적으로 할당되며 절대 공유되어 사용되지 않는다는 특징이 있다.
  • 각 쿼리의 용도 별로 필요할 때만 공간이 할당되고 필요하지 않은 경우에는 MySQL이 메모리 공간을 할당조차도 하지 않을 수도 있다.

 

대표적인 로컬 메모리 영역

 

  • 정렬 버퍼(Sort Buffer)
  • 조인 버퍼
  • 바이너리 로그 캐시
  • 네트워크 버퍼

 

 

 

 

 

 

 컴포넌트


MySQL 8.0부터는 기존의 플로그인 아키텍처를 대체하기 위해 컴포넌트 아키텍처가 지원된다. 컴포넌트는 기존 MySQL 서버의 플러그인 단점들을 해소한다.

 

[MySQL 서버 플러그인의 단점]

 

  • 플러그인은 오직 MySQL 서버와 인터페이스할 수 있고, 플러그인끼리는 통신할 수 없음
  • 플러그인은 MySQL 서버의 변수나 함수를 직접 호출하기 때문에 안전하지 않음 (캡슐화 X)
  • 플러그인은 상호 의존 관계를 설정할 수 없어서 초기화가 어려움

 

728x90
반응형