Procedimiento de detalle para generar un archivo har desde una url determinada a través de la herramienta de línea de comandos

Question

¿Alguien podría aconsejar cómo generar un archivo har desde una url dada a través de la línea de comando en linux? Las herramientas de detalle utilizadas y las pautas son muy apreciadas.

Gracias

Answer 1

Puede utilizar phantomjs para este trabajo.

phantomjs examples/netsniff.js "some_url" > out.har 

o echar un vistazo a la BrowserMob Proxy

Answer 2

He trabajado con PhantomJS para producir archivos HAR pero no son muy fiables en contraposición a los archivos HAR generados por los navegadores actuales como Chrome, Firefox. El uso de selenio y BrowsermobProxy, puede generar archivos HAR directamente desde los navegadores con un script en Python como esto:

from browsermobproxy import Server 
from selenium import webdriver 
import json 

server = Server("path/to/browsermob-proxy") 
server.start() 
proxy = server.create_proxy() 
profile = webdriver.FirefoxProfile() 
profile.set_proxy(self.proxy.selenium_proxy()) 
driver = webdriver.Firefox(firefox_profile=profile) 
proxy.new_har("http://stackoverflow.com", options={'captureHeaders': True}) 
driver.get("http://stackoverflow.com")  
result = json.dumps(proxy.har, ensure_ascii=False) 
print result 
proxy.stop()  
driver.quit() 

Si usted está buscando una herramienta de línea de comandos que headlessly genera datos de rendimiento con Chrome y Firefox HAR y, tienen un vistazo a Speedprofile.

Answer 3

Los archivos har de Phantomjs son una lista abreviada de activos. En otras palabras, cuando visitas una página web con Chrome u otro navegador, los archivos se cargan durante un período de segundos.

Pero phantomjs toma una instantánea instantánea de ese sitio web, antes de que todos los activos hayan tenido tiempo de cargar.

También excluye los archivos de datos y de imágenes (porque no son parte de la especificación Har)

Puede solucionar esto modificando el archivo de ejemplo netsniff.js.

He bifurcado ese proyecto y he hecho esas modificaciones en el siguiente enlace. Tenga en cuenta que he configurado el temporizador para que espere 20 segundos antes de generar el har. También agregué un poco de manejo de errores para ignorar los errores de js. El bit de manejo de errores se agregó para tratar con phantomjs creando archivos har no válidos si se encontraba con un error. (También comenté la función que excluye archivos de datos/imágenes)

Así que puede que esto no sea exactamente lo que usted quiere. Pero es un punto de partida para usted o cualquier otra persona que desee usar phantomjs.

Después de estos cambios, que pasó de conseguir consistentemente cuatro archivos de activos a cerca de 25.

https://github.com/associatedpress/phantomjs/blob/netsniff-timer/examples/netsniff.js