selenium使用中driver.get(url)时遇到的问题


        broswer = webdriver.Firefox()
 broswer.get("https://www.smzdm.com/p/20765776/#hfeeds") # self.logger.info(broswer.page_source)

        goods_scrapy_selector = Selector(text=broswer.page_source)

        title_selector = goods_scrapy_selector.css(".J_title")

        title = title_selector.get()

        self.logger.info(title)

 broswer.get("https://www.smzdm.com/p/20769796/#hfeeds") 
        goods_scrapy_selector = Selector(text=broswer.page_source)

        title_selector = goods_scrapy_selector.css(".J_title")

        title = title_selector.get()

不知道问什么,broswer只有在执行第一句的get时浏览器才会去加载页面,第二句不会去加载导致第二句的title是第一个地址的值。后来发现是url中#hfeeds这个锚的问题,去掉#feeds就好了,具体什么原因还不清楚。


免责声明!

本站转载的文章为个人学习借鉴使用,本站对版权不负任何法律责任。如果侵犯了您的隐私权益,请联系本站邮箱yoyou2525@163.com删除。



 
粤ICP备18138465号  © 2018-2025 CODEPRJ.COM