[Linux] gdb로 process/threads 디버깅하는 방법(feat. 좀비 프로세스)

💡 본 문서는 'gdb를 활용한 실행 중인 프로세스 & 스레드 디버깅 하기'에 대해 정리해놓은 글입니다.
딱히 프로세스가 죽은 것은 아닌데 과도하게 cpu를 잡고 있거나(특정 스레드 무한루프), 프로세스가 살아는 있지만 아무런 응답을 하지 않는(데드락) 경우가 있습니다. 혹은 이경우에 사용하는 gdb 디버거를 이용하여 실행 중인 프로세스에 직접 붙어 현재 상태를 체크하는 방법을 정리하였으니 참고부탁드립니다.

1. 스레드/프로세스 상태 확인하기

$ ps -eLf | grep <process name>
UID     PID    PPID  LWP   C NLWP  STIME TTY       TIME        CMD
kukuta  11048  1    11048  0  8    10:52 pts/0    00:00:00 <process name>
kukuta  11048  1    11050  1  8    10:52 pts/0    00:00:27 <process name>
kukuta  11048  1    11051  0  8    10:52 pts/0    00:00:19 <process name>
kukuta  11048  1    11052  0  8    10:52 pts/0    00:00:19 <process name>
kukuta  11048  1    11053  0  8    10:52 pts/0    00:00:00 <process name>
kukuta  11048  1    11054  0  8    10:52 pts/0    00:00:00 <process name>
kukuta  11048  1    11055  0  8    10:52 pts/0    00:00:00 <process name>
kukuta  11048  1    11056  0  8    10:52 pts/0    00:00:00 <process name>

• ps의 e 옵션은 전체 프로세스를 출력, L은 스레드 상태, f는 출력할 수 있는 모든 내용을 출력하라는 의미입니다.
• 여기서, LWP(Light Weight Process) 칼럼은 Thread ID를 나타내는 것입니다.

2. 실행 중인 프로세스 접근하기

2.1 실행중인 프로세스에 gdb 로 접근하기(Attaching 'gdb' on running process)

$ gdb -p <pid>

• 만일 실행 권한이 충분치 않다는 에러 메시지가 나오면 sudo로 실행해야 합니다.

2.2 스레드의 상태 보기

(gdb) info threads

​​Id   Target Id         Frame
​​8    Thread 0x7f0ec8fcc700 (LWP 11050) "<process name>" 0x00007f0ecdb81dbd in nanosleep () from /lib/x86_64-linux-gnu/libc.so.6
​​7    Thread 0x7f0ec3fff700 (LWP 11051) "<process name>" 0x00007f0ecdbb69b3 in epoll_wait () from /lib/x86_64-linux-gnu/libc.so.6
​​6    Thread 0x7f0ec37fe700 (LWP 11052) "<process name>" 0x00007f0ecdbb69b3 in epoll_wait () from /lib/x86_64-linux-gnu/libc.so.6
​​5    Thread 0x7f0ec2ffd700 (LWP 11053) "<process name>" 0x00007f0ecdbb69b3 in epoll_wait () from /lib/x86_64-linux-gnu/libc.so.6
​​4    Thread 0x7f0ec27fc700 (LWP 11054) "<process name>" 0x00007f0ecee09d84 in pthread_cond_wait@@GLIBC_2.3.2 () from /lib/x86_64-linux-gnu/libpthread.so.0
​​3    Thread 0x7f0ec1ffb700 (LWP 11055) "<process name>" 0x00007f0ecee09d84 in pthread_cond_wait@@GLIBC_2.3.2 () from /lib/x86_64-linux-gnu/libpthread.so.0
​​2    Thread 0x7f0ec17fa700 (LWP 11056) "<process name>" 0x00007f0ecee09d84 in pthread_cond_wait@@GLIBC_2.3.2 () from /lib/x86_64-linux-gnu/libpthread.so.0
* 1    Thread 0x7f0ecf67db00 (LWP 11048) "<process name>" 0x00007f0ecee09d84 in pthread_cond_wait@@GLIBC_2.3.2 () from /lib/x86_64-linux-gnu/libpthread.so.0

2.3 모든 스레드들의 호출 스택 보기

(gdb) thread apply all bt

2.4 디버거가 붙어 있는 스레드 변경하기

(gdb) thread <tid>

2.5 스레드의 호출 스택 보기

(gdb) bt

 

참고

• [stackoverflow] how-to-attach-a-process-in-gdb: http://stackoverflow.com/questions/14370972/how-to-attach-a-process-in-gdb
• [Tistory] gdb - 실행 중인 프로세스 & 스레드 디버깅 하기: https://kukuta.tistory.com/202
• gdb - breakpoint: http://kukuta.tistory.com/163
• GDB Tutorial: http://kukuta.tistory.com/3