Windows WEB

IIS 6.0 교착 상태 덤프 파일 분석

2008.07.26 00:18

dhkim 조회 수:29120

IIS 6.0에서 교착 상태 덤프 파일 분석 (OrphanWorkerProcess)
www.wssplex.net

IIS 6.0 에서는 재생이나 오류가 발생하는 경우 해당 응용프로그램 풀을 재생하는 기능을 지원합니다.

그럴때 정상적인 종료가 되지 못할경우 오류이벤트가 발생하게 되나, 일반적으로 크게 문제가 되지는 않지만 일부 웹사이트에서는 장애를 일으키는 경우가 있습니다.

특히나, 기본설정값으로 IIS 6.0 에서는 오류가 급증할경우 코어를 보호하기 위해서 해당 응용프로그램풀을 아예 중지를 시켜 버립니다.

이벤트로그를 유심히 살펴봐야 하는데요., 주로 다음과 같은 이벤트가 발생하게 됩니다.



이때 고아프로세스 형태로 재생을 시도하게 되며, 새로운 요청은 별도의 새로운 작업자프로세스에서 처리하게 됩니다. 고아프로세스는 해당 프로세스가 완전 종료하기 전의 상태입니다.

이 프로세스에는 재생전 요청이나 처리가 되지 못한 요청이 저장되어 있는데, 이를 분석하면 원인을 제공하는 요청이나 처리를 어느정도 파악할수 있습니다.

이때, 디버거를 통해서 해당 프로세스의 크래시 덤프를 떠서 분석을 할수 있는데요,. 덤프를 자동으로 뜰수 있게끔 IIS 6.0 에서는 고아프로세스가 종료할 때 특정 작업을 할수 있는 옵션을 제공합니다.


1. 덤프파일 생성을 위한 설정

다음과 같이 메타베이스에 값을 설정하면 됩니다.

adsutil.vbs SET W3SVC/AppPools/DefaultAppPool/OrphanWorkerProcess TRUE
adsutil.vbs SET W3SVC/AppPools/DefaultAppPool/OrphanActionExe "F:Debugdebug.cmd"
adsutil.vbs SET W3SVC/AppPools/DefaultAppPool/OrphanActionParams "%1%"

debug.cmd 배치파일

@if "%_echo%"=="" echo off
setlocal
    set TIMESTAMP=%DATE:~-9%_%TIME%
set TIMESTAMP=%TIMESTAMP:/=_%
set TIMESTAMP=%TIMESTAMP::=_%
set TIMESTAMP=%TIMESTAMP:.=_%
set TIMESTAMP=%TIMESTAMP: =_%
set FILENAME=F:Debugcrash_%TIMESTAMP%.dmp
set LOG=F:Debuglog.txt
set COMMAND="C:Program FilesDebugging Tools for Windows"cdb.exe -c ".dump /o /mhf %FILENAME%;q" -p %1

echo %COMMAND% > %LOG%
%COMMAND%

endlocal



물론 덤프를 뜰수 있도록 사전에 디버거를 설치해 놓아야 하겠죠..^^

OrphanActionExe: %SystemRoot%System32CScript.exe
OrphanActionParams: C:debuggersadplus.vbs -quiet -hang -p %1%


위와 같이 디버거툴에 내장된 Adplus.vbs 스크립트를 이용해서도 덤프파일을 생성할수 있습니다.



2. 덤프파일 분석

생성된 덤프파일 분석은 이미 설치한 디버거툴을 통해서 분석을 할수 있습니다. 최근에 배포되고 있는  Windbg 툴을 이용해도 좋습니다.

다운로드: http://www.microsoft.com/whdc/devtools/debugging/default.mspx

그런데 이툴은 심볼을 자동 다운로드를 지원하지 않하서, 해당 덤프를 분석해도 별 도움이 되지 않는 아주 간단한 로그만 볼수가 있습니다.

이 툴보다는, 최근에 새로이 배포하는 Debug Diagnostic Tool v1.1 를 권장합니다. 이 툴은 특히 IIS 에 관련된 프로세스 덤프 및 분석, 그리고 관련 심볼을 자동다운로드 하여 분석해 줍니다.

다운로드: http://www.microsoft.com/downloads/details.aspx?familyid=28BD5941-C458-46F1-B24D-F60151D875A3&mg_id=10110&displaylang=en

관련 심볼을 통해서 분석하므로, 아주 상세한 분석을 보여줍니다.



요약에는 WinSock 관련된 문제라고 하는데요. 해당 쓰레드의 상세를 보면, 다음과 같습니다.


실제, 1013 이벤트 에서는 덤프에서 분석이 가능한 데이터가 그리 많지 않습니다.

주로 효과적인 덤프분석은 웹서버에서 루프같은 CPU 로드가 100% 이거나, 메모리 누수같은 메모리 급증이 나타날때 재생되거나 또는 해당 시점에서 직접 덤프를 뜨는 것이 아주 좋습니다.

그럴 경우 다음과 같이 실제 문제가 되는 코드까지도 알수 있습니다.

POST request for   /www/body/A.asp
Request alive for   00:32:47
QueryString   PageName=PageUpload&theAct=upload&overWrite=true
Request mapped to   D:serviceserverinfo.pe.krwwwbodyA.asp
ASP Application   /LM/W3SVC/792638948/Root
ASP Template   D:SERVICEserverinfo.pe.krWWWBODYA.ASP

StreamUpload   sA.CopyTo sB, intEnd - intInfoEnd - 4   D:SERVICEserverinfo.pe.krWWWBODYA.ASP   1697
PageUpload   StreamUpload()   D:SERVICEserverinfo.pe.krWWWBODYA.ASP   1577
Global Scope   PageUpload()   D:SERVICEserverinfo.pe.krWWWBODYA.ASP   192



좀더 상세한 분석은, 각자 운영하는 서버별로 상황이 다르므로 디버거툴을 이용해서 분석해 보시기를 바랍니다. 또한  추가로 다음문서를 더 참고해 보시기 바랍니다.

ASP.NET 교착 상태에 있는 이벤트 ID 1003
http://support.microsoft.com/?kbid=325947

ASP.NET 응용 프로그램에서 웹 서비스를 요청하면 경합, 성능 저하 및 교착 상태가 발생한다
http://support.microsoft.com/kb/821268/ko
번호 제목 글쓴이 날짜 조회 수
36 Windows 2008 Server에서 IIS Session Timeout 설정 호스트웨이 2012.05.25 10896
35 IIS 상태코드정리 호스트웨이 2012.05.25 10298
34 Windows 2008 Server에서 MIME 형식 사용 file 호스트웨이 2012.05.05 9477
33 IIS 디렉터리 검색 기능 file 호스트웨이 2012.05.05 9886
32 IIS 7.0 백업 및 복구 file 호스트웨이 2012.04.27 10705
31 Windows2008 FTP Passive Mode file 호스트웨이 2012.04.27 12862
30 Windows 2008 Server에서 IIS 사이트별 대역폭 제한 file 호스트웨이 2012.04.20 11862
29 IIS에서 특정 IP 접근제한 file 호스트웨이 2012.04.20 16240
28 IIS6 에서 PHP 사용 방법 file 호스트웨이 2012.04.13 9913
27 ASP 다운로드 용량 제한 호스트웨이 2012.04.13 9428
26 IIS7에 FTP7.5 설치하기 file 호스트웨이 2012.03.30 8156
25 Windows2003 IIS 6.0 /7.0 업로드 제한 file 호스트웨이 2012.03.16 9125
24 IIS7에서 멀티인증서에 대한 시큐어 바인딩은 Appcmd 명령을 통하여 진행 할 수 있다. file 호스트웨이 2012.03.16 9965
23 IIS 7사용 시 사용자 브라우저에서 자세한 ASP 에러코드가 표시되지 않을 때 file Urikiri 2010.07.06 22713
22 [WMS] Windows Media Player 동영상 재생 문제 해결2 shcho 2009.05.14 15089
21 [WMS] Windows Media Player 동영상 재생 문제 해결1 shcho 2009.05.14 16747
20 2008 FTP 설정 방법 file dhkim 2008.12.18 23756
19 Active Server Pages 오류 'ASP 0131', 오류 해결 방법 dhkim 2008.09.17 25128
» IIS 6.0 교착 상태 덤프 파일 분석 dhkim 2008.07.26 29120
17 IIS동시접속자가 많을때, IIS의 튜닝 호스트웨이 2008.06.04 43372