Obtener página generada con Javascript en Python

Question

Me gustaría descargar la página web generada por Javascript y almacenarla en la variable de cadena en el código Python. La página se genera cuando haces clic en el botón.

Si yo supiera la URL resultante Me gustaría utilizar urllib2 pero este no es el caso.

agradecimiento

Answer 1

Usted podría utilizar Selenium Webdriver:

#!/usr/bin/env python 
from contextlib import closing 
from selenium.webdriver import Firefox # pip install selenium 
from selenium.webdriver.support.ui import WebDriverWait 

# use firefox to get page with javascript generated content 
with closing(Firefox()) as browser: 
    browser.get(url) 
    button = browser.find_element_by_name('button') 
    button.click() 
    # wait for the page to load 
    WebDriverWait(browser, timeout=10).until(
     lambda x: x.find_element_by_id('someId_that_must_be_on_new_page')) 
    # store it to string variable 
    page_source = browser.page_source 
print(page_source)