어제보다 나은 오늘

엑셈에서 유료로 진행되는 Java Performance Fundamental 교재를 공유하기로 하였습니다. 세미나에 참석하셨던 분들의 요청이 가장 큰 동기였습니다. 그러나 책을 출간하고 나서 책의 내용을 요약하여 포스팅하는 작업이 계속 밀리더라구요. 요즘 관심사가 좀 다른데 있어서 말입니다. 그래서 PDF로 공유하는 것보다 PT도 가능한 형태로 공유하기 위해 이러한 방식을 사용하였습니다. 이 교재 내용은 제가 쓴 Java Performance Fu..

Hotspot JVM, 다시말해 Sun사에서 만들어 HP, Solaris, Windows, Linux, Mac 등에서 사용하는 JVM은 Garbage Collector를 추가하는 방식으로 Garbage Collection이 개선되어 왔다. 다시말해 버전이 올라가면서 기존의 Garbage Collector 보다 더 나은 알고리즘을 가진 Garbage Collector를 추가하여 제공하는 방식으로 진화해왔다는 것이다. 그러므로 Hotspot JVM에서는..

Hotspot JVM 그러니까 Sun, HP, Windows, Linux, Mac 등에서 사용되는 JVM은 Generational Heap 구조를 가지고 있다. Generational Heap이란 Java Object의 활용도에 따라 Object가 위치하는 영역을 구분해 놓은 것으로 말할 수 있다. Hotspot JVM의 Heap Generation의 구조는 아래의 그림과 같은데 Sun사에서 Heap을 이렇게 디자인한 것은 경험적으로 알게된 어떠한..

Sun, HP, Windows, Linux에서 사용되는 Hotspot JVM은 Young Generation과 Old Generation으로 나뉘는 Generational Heap을 가진다고 하였다. 이 Hotspot JVM의 Garbage Collection에는 하나의 가설이 뒤를 든든히 받치고 있다. 그것은 바로 Weak Generational Hypothsis이다. 내용은 두 가지로 구성되어 있다. 첫째. High Infant Mortalit..

IBM JVM은 1.4 버전까지는 Object와 Array의 구분 없이 세개의 Header를 가진다. 역시 각 header는 1 Word (32bit 머신 32 bits)의 크기를 가진다. 첫번째 header는 Object Size와 Flag정보를 보유하고 있다. Flag는 GC를 위한 정보와 Pinned 또는 Dosed Object 여부를 체크한다.  두번째 header는 Object의 경우 Method Table을 위한 Pointe..

Hotspot JVM이란 Hotspot Compiler를 사용하는 Sun, HP, Oracle에서 배포하는 JVM을 말한다. 이 Hotspot JVM의 Heap Object Layout은 왼편의 그림과 같다. Heap에는 Object와 Array만이 존재하는데 Hotspot JVM의 경우 Object는 Header가 2개, Array에는 Header가 3개 존재한다. Array도 사실은 Object의 Layout에 Array Size를 알려주는 He..

IBM JVM의 Heap은 Java5에 와서 그 구조가 달라지기 시작하였다. Java 1.4.2 버전까지는 One-Heap 구조로 고수하다가  Java 5에서는 Hotspot JVM 처럼 Generational Heap 구조를 사용할 수 있게 되었다. One Heap구조는 아래의 그림과 같이 구성되어 있다. Heapbase라고 하는 Heap의 처음 주소에서부터 Heaptop 까지 확장이 가능하며 가변크기일 경우 현재까지 할당된 부분을 He..

Hotspot JVM은 Generational Heap으로 되어 있다. Heap은 Young Generation과 Old Generation으로 되어 있으며 Young Generation은 Eden 영역과 Survivor 영역으로 구성되어 있다.  Eden 영역은 Object가 처음으로 할당되는 장소이며 Eden이 꽉 차게 되면 Live Object만 골라 Survivor 영역으로 복사하게 된다. 이를 Minor Garbage Col..

Memory Leak을 다루는 방법을 강구하기 전에 Root Set에 대해 좀 더 알아볼 필요가 있습니다.  이 그림은 구동 중인 JVM의 메모리 구조입니다. 간략하게 설명하자면 JVM은 실행 데이터 영역과 그 밖의 JVM의 엔진 역할을 하는 모듈 등으로 구성됩니다. 실행 데이터 영역은 다시 Stack과 같이 Thread에게 속해 있는 메모리 영역과 Thread가 공유하는 Heap, Method Area 같은 것이 있습니다..

Java는 Garbage Collection이라는 자동 메모리 관리 기능을 가지고 있습니다. 이것은 메모리 관리의 부담을 덜어 생산성을 향상하려는 좋은 기능입니다. 하지만 모든 자동 기능이 그러하듯 이것도 완벽하게 동작하지는 않습니다. 그래서 Java에서는 메모리 문제가 더 부각되는 경향이 있습니다.   우선 Memory Leak이란 무엇일까요? Memory Leak을 말 그대로 풀자면 메모리 누수, 즉 메모리가 샌다는 것을..

Java Heap은 Instance또는 Java Object나 Array가 저장되는 공간으로 모든 Thread들에 의해 공유된다. 그렇기 때문에 동기화 문제도 발생할 수도 있는 공간이기도 하다. Heap도 JVM이 기동할 때 같이 생성된다. JVM는 Heap에 메모리를 할당하는 instruction만 존재한다. Bytecode로는 new, newarray, anewarray, multianewarray만이 존재한다. 그리고 메모리 해제를 위한 명..

Java Method를 Call할 때 Thread의 Java Stack에 새로운 Stack Frame을 생성하여 Push하는 것처럼 Native Method를 Call하게 되면 Java Stack에서 Native Method Stack영역으로 나와서 직접 Native Method를 수행 이는 Java Stack에서 Dynamic Link를 통해 Native 까지 확장하는 것으로 볼 수 있음. 만약 JNI를 사용하고 있고 이것이 C로 구현이 되어 있다..

Method Area는 Reference시 빈번하게 접근되는 곳이므로 원하는 정보를 찾는 속도가 중요한 이슈가 될 수 있다. Class의 Method들에 대한 direct reference를 갖는 자료구조이며 Method 호출을 위한 데이터 구조이다. 이를 사용하게 되면 Method 참조를 빠르게 수행할 수 있게 된다. Type중 interface나 abstract class가 아닌 class에서 존재하며 해당 Class의 Method뿐만이 아니..

Class Loader에 의해 Load된 모든 Class의 메타 정보를 저장하는 메모리 공간으로 모든 Thread들에 의해 공유된다. Method Area는 JVM 이 시작할 때 생성된다. Method Area의 구현도 역시 JVM 벤더가 알아서 하게 되어 있다. Sun JVM에서는 이 Method Area를 Permanent Area라는 명칭을 가진 특정 메모리 영역으로 구현하고 있고 IBM JVM의 경우 별도의 영역 구분 없이 Heap내에..

Java virtual Machine Stacks는 Thread의 수행정보를 기록하는 Stack Frame을 저장하고 있는 영역이다. Java virtual Machine Stacks도 Thread 별로 한 개씩 존재하며 Thread와 함께 생성된다. Java Virtual Machine Stacks는 Thread의 배타적인 영역으로 서로 공유되지 않는다. Java Virtual Machine Stacks은 각각 분리된 Stack Fram..

Program Counter라고도 불리는 PC register는 각 Thread마다 하나씩 존재한다. 이것은 Thread가 생성될 때 같이 생성되며 Native Pointer와 Return Address를 가지고 있다. Thread가 Java Method를 수행할 때 현재 수행되고 있는 Instruction의 주소를 포함하고 있다. 이 Instruction의 주소는 Native Pointer일 수도 있고 Method Bytecode의 시작 o..

Runtime Data Areas는 JVM이 Java 프로그램을 수행하기 위해 OS로 부터 할당받는 메모리 영역이라고 정의내릴 수 있다. Runtime Data Areas는 각각의 목적에 따라 PC Register, Java Virtual Machine Stacks, Native Method Stacks, Method Area, Heap 이라는 5개의 영역으로 나뉘게 된다. 이중 PC Register, Java Virtual Machine St..

Java Virtual Machine은 Java를 실행하기 위한 핵심적인 위치를 차지한다. 그러나 Java Virtual Machine의 실체는 사실 없다. JVM은 하나의 스펙 또는 약속된 개념에 지나지 않기 때문이다. JVM이 모든 구현은 이 스펙을 보고 Vendor에서 알아서 한다. 하지만 이 스펙에 어떻게 구현하라는 명시적인 이야기는 담겨져 있지 않다. 대부분 어때야 한다 정도의 정의만이 있을 뿐이다. JVM은 여러개의 모듈로 구성된..

Oracle 성능을 하다가 Java 성능으로 영역을 확장하면서 힘들었던 것은 무엇을 공부해야 할지를 정하는 것이었다. Java라는 것이 용어부터 너무도 많고 기술도 너무 많았기 때문에 이것 저것 하다보면 남는 것도 없이 분주하기만 할 뿐이었다. WAS 벤더들의 교육을 찾아 다녀도 마찬가지였다. 자신들의 WAS에 특화된 부분에 대해서 얘기를 듣다보면 성능 문제를 일으키는 근본적인 요소들에 대해서는 잘 파악이 되지 않았던 것이다. 그래서 마늘과 쑥을..

Oracle 성능을 하면서도 항상 이 지식들이 어렵다는 것을 고민해 왔다. 가장 어려운 것은 개별 지식 보다도 개념을 잡는 것이라 생각하는데 이를 위해 Exem OnAir라는 동영상을 제작하기로 결정하였다. 첫번째 것은 Oracle 성능 관리의 가장 중요한 요소인 Wait Event의 개념을 잡기 위한 것이다. 여자친구를 만나러 가다가 예기치 못한 일로 약속에 늦는다는 가상 설정으로 Wait Event의 개념을 잡을 수 있도록 하였다. 두번..

이전 글에서는 프로세스의 RSS와 VSZ로 모니터링 되는 java 프로세스의 메모리가 어떤 의미인지를 살펴보았다. 이번에는 이 Pmap의 결과에서 Heap메모리가 어디에 할당되는지를 알아보도록 하겠다. 이것이 1052 프로세스의 Pmap의 결과이다. 이 결과는 할당 받은 메모리 block마다 한 row씩 표현이 되어 있다. 각 Memory Block은 네 부분의 정보로 구성이 되어 있다. 첫번째 정보는 메모리가 시작하는 주소이다. 이것은 16자리의..

JVM Internal 세미나를 진행하다 보면 자신이 설정한 Heap Size와 OS 프로세스 메모리에 대해 질문은 받는 경우가 많았다. 질문의 내용은 대충 다음과 같다. Heap Size를 -Xms512m, -Xmx1024m로 잡은 경우 Java Process가 실제로 점유한 메모리는 얼마인가? 그리고 Top이나 ps를 통해 모니터링 된 rss, vsz의 크기는 어떤 것을 의미하는가? 이 질문에 답을 하기 위해 32bit의 linux머신에서 수행..

가끔 테스트를 할 때나 모니터링을 할 때 JDBC를 통해 접속한 세션의 정보를 필요로 할 때가 있다. 이럴 때면 해당 세션의 SID를 가져 오기 위해 SQL을 수행하거나 아니면 세션 정보를 지정하기 위해 DBMS_APPLICATION_INFO 팩키지를 수행해야 한다. 이러한 작업은 번거롭기도 하고 Session의 정확한 일량을 체크하고자 할 때 껄끄러울 수도 있다. 그러나 JDBC Connection을 맺을 때 이런 정보를 설정해 놓고 시작한다면 ..

  1) connection과 session의 의미 - Connection과 Session은 엄밀히 말해 다른 것임 - Connection은 물리적인 Network Path를 의미 - Session은 유저가 인증을 통과하여 접속할 때부터 접속을 끊을 때까지의 Oracle과의 상호작용을 의미 - Session은 물리적인 Connection을 통해 Oracle에 접속됨 - Session과 Connection이 1:1일 경우도 있지만 ..

  1) JDBC Driver - JDBC는 관계형 데이터베이스를 접근하기 위한 표준 API를 의미 - 다양한 DBMS 벤더들은 각자의 방식으로 DBMS에 접근하고 사용해야만 했었으나 Java진영에서는 표준 API를 정하여 각 벤더들로 하여금 이를 구현하게 함 - 이것을 JDBC라고 하고 이를 구현한 것이 JDBC Driver로 각 벤더들은 표준 API와 함께 각자 이를 확장한 나름의 API도 제공하고 있음 - 표준 JDBC API..

Statement Cache - JDBC3.0에 소개된 기능으로 루프내에서 반복적으로 수행되는 Statement에 대한 Oracle Cursor를 캐시하는 기능임 - 이는 Statement가 close될 때 JDBC드라이버가 cursor와 연결된 Statement를 cache하게 되고 다음번 작업에서 같은 Statement를 수행하게 되면 Cache목록에서 이 Statement를 재사용하게 되어 Oracle에서는 soft parsing을 하..

대량의 DML작업을 하기 위해서는 기본적으로 각각 insert, update, delete문을 만들어 수행하게 된다. 그러나 같은 SQL이라 하더라도 이를 실행(Execute)하는 방법에 따라 그 성능의 차이가 나타날 수 있다. 우리는 일반적으로 SQL을 수행할 때 PreparedStatement라는 객체를 이용하여 작업을 한다. 대량의 DML을 할 때 우리는 PreparedStatement에 SQL을 지정하고 루프내에서 파라메터를 바인딩 하여 ..

지금 된서리를 맞고 있는 참여정부 시절에 한 때 지면을 화려하게 장식했던 단어가 있다. 그것은 바로 '풍선 효과' 이다. 이 풍선 효과라는 말은 집값을 잡으려고 한쪽에 규제를 몰아주니 그 곳의 집값의 오름세는 둔화되었지만 그 근처의 집값이 오르는 현상을 일컫는다. 풍선 한 쪽을 꾸욱 누르니 반대 편으로 공기가 밀려 부풀어 오르는 모양새를 빗댄 것이다. 이런 풍선 효과가 비단 부동산에만 있는 것은 아니다. 오라클의 성능에서도 이러한 풍선효과는 엄연히..

이 글은 내가 InterMax라는 툴을 지원할 때 작성한 글이다. PC에서 썩고 있길래 여기에 올린다. 1)     WAS에서 성능이란 무엇인가? 우선 Web Application Server(이하 WAS)에서 성능을 분석하는 방법을 논의하기 이전에 WAS에서 성능이란 무엇인가에 대해 먼저 생각을 해 볼 필요가 있다. 쉬운 설명을 위해 자동차를 예로 들어 보도록 하자. 자동차는 용도에 따라 다양한 종류가..

오늘 회사의 고문으로 계시는 이상원 박사님이 방문을 하셔서 SSD를 이용한 OLTP 성능 향상 방안에 애해 많은 이야기를 해 주셨다. SSD란 Flash Memory로 만든 하드디스크 정도로 생각하면 쉽다. 기존의 Arm이 움직여 플레이트에 있는 정보를 읽는 기계적인 방식에서 Flash Memory를 통해 전자적인 방식으로 변경하기 때문에 속도 측면에서 많은 이점이 있고 전기도 절약되는 효과가 있다고 한다. 그런데 가격은 착하지가 못하기 때문에 아..