黑龙江网站建设_湖州网站建设_协会网站建设_太原网站制作

from selenium.webdriver.chrome.options import Optionsclass XintongSpiderMiddleware(object):def __init__(self):option = Options()option.add_argument('--headless')self.driver = webdriver.Chrome(executable_path="D:/Python/test3/chromedriver.exe",chrome_options=option)def process_request(self, request, spider):self.driver.get(request.url)print("页面开始渲染。。。")self.driver.execute_script("scroll(0, 1000);")time.sleep(1)rendered_body = self.driver.page_sourceprint("页面完成渲染。。。")return HtmlResponse(request.url, body=rendered_body, encoding="utf-8")def spider_closed(self, spider, reason):print('驱动关闭')self.driver.close() 丹阳网站建设赣州网站建设苏州网站建设制作西安网站设计芜湖网站设计公司富阳网站建设保定网站设计公司南京网站设计公司网站制作建设石家庄网站建设微信平台开发大连网站制作北京市公司网站制作成都市网站建设石家庄网站设计房地产app开发网站建设哪湖州网站建设制作公司主页青岛营销型网站建设大企业网站建设网站建设时间外贸网站建设个人主页网站制作网站建设网站定制河北网站制作佛山小程序开发网站网站制作北京公司网站制作网站建设网站定制3g网站建设