screen-scraping

10El calor

5Respuesta

¿Cómo puedo usar Perl para tomar texto de una página web que se genera dinámicamente con JavaScript?

Hay un sitio web que estoy tratando de extraer información de en Perl, sin embargo, la sección de la página que necesito está siendo generada usando javascript así que todo lo que se ve en la fuente e

6El calor

2Respuesta

raspar los tweets completos de un usuario

Me gustaría extraer todos los tweets de un usuario. Podría hacerlo de la manera difícil (raspando manualmente Twitter) o de la manera más fácil: usando su api. El problema con la forma fácil (api) es

8El calor

2Respuesta

¿Existe un buen tutorial para averiguar qué está haciendo un sitio web para que su programa pueda hacer lo mismo?

¿Existe una buena guía o tutorial para las personas que necesitan interactuar mediante programación con sitios web dinámicos? Ha habido una serie de preguntas de Perl sobre eso últimamente, y no he en

14El calor

4Respuesta

Arrastrar y raspar iTunes App Store

Me di cuenta de que iTunes preview le permite rastrear y raspar páginas a través del protocolo http://. Sin embargo, muchos de los enlaces intentan abrirse en iTunes en lugar de en el navegador. Por e

8El calor

3Respuesta

Scraping sitios que requieren iniciar sesión con Python

Uso varias redes publicitarias para mis sitios, y para ver cuánto dinero he hecho, necesito iniciar sesión en cada día para sumar los valores. Estaba pensando en hacer un script de Python que hiciera

8El calor

3Respuesta

Filtrado inteligente de pantalla utilizando diferentes proxies y agentes de usuario al azar?

Quiero descargar algunas páginas HTML de http://abc.com/view_page.aspx?ID= La identificación es de una matriz de números diferentes. Me interesaría visitar varias instancias de esta URL y guardar el a

5El calor

5Respuesta

PHP equivalente de PyQuery o Nokogiri?

Básicamente, quiero hacer algo de raspado de pantalla HTML, pero averiguando si es posible en PHP. En Python, yo usaría PyQuery. En Ruby, usaría Nokogiri.

5El calor

3Respuesta

¿Cómo puedo tomar una captura de pantalla de un sitio web con .NET?

Estoy buscando ideas sobre cómo tomar capturas de pantalla de sitios web dentro de una aplicación .NET. Esta aplicación será un servicio de Windows. ¡Gracias!

5El calor

1Respuesta

¿Hay librerías .NET OCR que realizarán OCR directamente en una ventana de aplicación?

Estoy buscando una biblioteca .NET OCR gratuita que pueda hacer OCR en una ventana de aplicación determinada o incluso una imagen en la memoria (puedo tomar una instantánea de la ventana de la aplicac

23El calor

7Respuesta

Nokogiri, open-uri, y caracteres Unicode

Estoy usando Nokogiri y open-uri para tomar el contenido de la etiqueta del título en una página web, pero estoy teniendo problemas con los caracteres acentuados. ¿Cuál es la mejor manera de lidiar co