¿Cómo puedo usar un proxy SOCKS 4/5 con urllib2?

¿Cómo puedo usar un proxy SOCKS 4/5 con urllib2 para descargar una página web?¿Cómo puedo usar un proxy SOCKS 4/5 con urllib2?

Fuente

2010-02-23 Mike

relacionado para Tor: http://stackoverflow.com/questions/1096379/how-to-make-urllib2-requests-through-tor-in-python –

Dado que SOCKS es un proxy de nivel de socket, debe reemplazar el objeto de socket utilizado por urllib2. Consulte la solución this. Si el parche de mono no es lo suficientemente bueno para usted, puede intentar crear una subclase o copiar o modificar el código de la biblioteca estándar urllib2.

Fuente

2010-02-23 13:50:59 fviktor

Agregando una alternativa a la respuesta de pan cuando necesite usar muchos proxies diferentes al mismo tiempo.

En ese caso, necesita crear un abridor como lo hace con un proxy HTTP. Hay un código disponible en GitHub https://gist.github.com/869791

opener = urllib2.build_opener(SocksiPyHandler(socks.PROXY_TYPE_SOCKS4, 'localhost', 9999)) 
print opener.open('http://www.whatismyip.com/automation/n09230945.asp').read()

Fuente

2011-11-11 22:44:52

Oye, estaba usando el código de github. Lamentablemente, la autenticación no funciona. He pasado el nombre de usuario y la contraseña correctos en socksipyhandler.py; sin embargo, aparece el error (3, "nombre de usuario desconocido o contraseña no válida"). Puedo confirmar que mi contraseña de nombre de usuario funciona, ya que mi comando cURL funciona con las mismas credenciales. –

No importa, descubrió el problema, había un error tipográfico en socks.py =), por cierto, buen trabajo. ¡Gracias una tonelada! –

¿Cómo puedo usar un proxy SOCKS 4/5 con urllib2?

Respuesta

Cuestiones relacionadas