Errores con el módulo de mecanización de Python

Question

Estoy usando el módulo mechanize para ejecutar algunas consultas web desde Python. Quiero que mi programa sea resistente a los errores y maneje todo tipo de errores (URL incorrectas, respuestas 403/404) con gracia. Sin embargo, no puedo encontrar en la documentación de mechanize los errores/excepciones que arroja para varios errores.

Acabo de llamar a:

self.browser = mechanize.Browser() 
    self.browser.addheaders = [('User-agent', browser_header)] 

    self.browser.open(query_url) 
    self.result_page = self.browser.response().read() 

¿Cómo puedo saber qué errores/excepciones puede ser lanzada aquí y manejarlos?

Answer 1

$ perl -0777 -ne'print qq($1) if /__all__ = \[(.*?)\]/s' __init__.py | grep Error 

'BrowserStateError', 
'ContentTooShortError', 
'FormNotFoundError', 
'GopherError', 
'HTTPDefaultErrorHandler', 
'HTTPError', 
'HTTPErrorProcessor', 
'LinkNotFoundError', 
'LoadError', 
'ParseError', 
'RobotExclusionError', 
'URLError', 

O:

>>> import mechanize 
>>> filter(lambda s: "Error" in s, dir(mechanize)) 
['BrowserStateError', 'ContentTooShortError', 'FormNotFoundError', 'GopherError' 
, 'HTTPDefaultErrorHandler', 'HTTPError', 'HTTPErrorProcessor', 'LinkNotFoundErr 
or', 'LoadError', 'ParseError', 'RobotExclusionError', 'URLError'] 

Answer 2

He encontrado esto en sus documentos:

Una última cosa a tener en cuenta es que hay son algunos cajón de sastre desnuda excepto: declaraciones en el módulo, que son ahí para manejar inesperada mala entrada sin bloquear su programa. Si ocurre esto , es un error en el mecanizado, así que por favor envíeme el texto de advertencia.

Supongo que no generan ninguna excepción. También puede buscar el código fuente de las subclases de excepción y ver cómo se usan.

Answer 3

Si bien esto ha sido publicado hace mucho tiempo, creo que todavía hay una necesidad de responder a la pregunta correctamente, ya que viene en los resultados de búsqueda de Google por esta misma cuestión .

Mientras escribo esto, mecanizar (versión = (0, 1, 11, Nada, Nada)) en Python 265 urllib2.HTTPError plantea por lo que el estado HTTP disponible a través de la captura de esta excepción, por ejemplo:

import urllib2 
try: 
... br.open("http://www.example.org/invalid-page") 
... except urllib2.HTTPError, e: 
... print e.code 
... 
404