WebClient: el servidor remoto devolvió un error: (403) Prohibido

Question

Abrir una página pública desde el navegador funciona bien.

Descargar la misma página usando WebClient throws - (403) Prohibido.

¿Qué está pasando aquí?

Aquí está rápida ejemplo copiar/pegar (utilizado en la aplicación de consola) a la página específica en la web:

try 
{ 
    WebClient webClient = new WebClient(); 
    string content = webClient.DownloadString("http://he.wikisource.org/wiki/%D7%A9%D7%95%D7%9C%D7%97%D7%9F_%D7%A2%D7%A8%D7%95%D7%9A_%D7%90%D7%95%D7%A8%D7%97_%D7%97%D7%99%D7%99%D7%9D_%D7%90_%D7%90"); 
} 
catch (Exception ex) 
{ 
    throw; 
} 

Answer 1

acabo probado con Fiddler corriendo a ver la respuesta y devuelve el siguiente aviso con el código de estado.

Scripts should use an informative User-Agent string with contact information, or they may be IP-blocked without notice.

Esto funciona.

WebClient webClient = new WebClient(); 
    webClient.Headers.Add("user-agent", "Only a test!"); 

    string content = webClient.DownloadString("http://he.wikisource.org/wiki/%D7%A9%D7%95%D7%9C%D7%97%D7%9F_%D7%A2%D7%A8%D7%95%D7%9A_%D7%90%D7%95%D7%A8%D7%97_%D7%97%D7%99%D7%99%D7%9D_%D7%90_%D7%90");