Обнаружение зависаний с помощью Python urllib2.urlopen

Я использую urllib2 Python для отправки сообщения HTTP:

import socket, urllib, urllib2

socket.setdefaulttimeout(15)    

postdata = urllib.urlencode({'value1' : 'a string', 'value2' : 'another string'})
headers = {
    'User-Agent': 'Agent',
    'Content-Type': 'application/x-www-form-urlencoded',
    'Accept': 'text/html, */*',
}

try: 
    request = urllib2.Request('http://www.example.com', postData, headers)
    response = urllib2.urlopen(request)
except urllib2.HTTPError, e:
    # Handle here
except urllib2.URLError, e:
    # Handle here
except httplib.HTTPException, e:
    # Handle here

Иногда проблема с сетью приводит к тому, что вызов urlopen никогда не возвращается. Мы видим, что другие ошибки (включая тайм-ауты) правильно обрабатываются блоком except, и есть вызов socket.setdefaulttimeout (), но все еще есть случаи, когда urlopen никогда не вернется.

Я знаю, что он никогда не возвращается, потому что у нас есть некоторые строки журнала в нашем фактическом коде, который вызывается до и после, и когда эта проблема возникает, выполняются только предыдущие вызовы, и сценарий зависает навсегда.

Как лучше всего обнаружить / обработать это?

13
задан jathanism 6 April 2011 в 13:54
поделиться