博客
关于我
强烈建议你试试无所不能的chatGPT,快点击我
动态网站爬虫Python-selenium-PhantomJS
阅读量:7263 次
发布时间:2019-06-29

本文共 1203 字,大约阅读时间需要 4 分钟。

from selenium import webdriver#from selenium.webdriver.common.proxy import Proxyfrom selenium.webdriver.common.proxy import ProxyTypefrom selenium.webdriver.common.desired_capabilities import DesiredCapabilitiesdcap = dict(DesiredCapabilities.PHANTOMJS)dcap["phantomjs.page.settings.userAgent"] = (    "Mozilla/5.0 (iPod; U; CPU iPhone OS 2_1 like Mac OS X; ja-jp) AppleWebKit/525.18.1 (KHTML, like Gecko) Version/3.1.1 Mobile/5F137 Safari/525.20")###设置浏览器heardersobj = webdriver.PhantomJS(executable_path="E:/phantomjs/bin/phantomjs.exe",desired_capabilities=dcap)proxy=webdriver.Proxy()proxy.proxy_type=ProxyType.MANUALproxy.http_proxy='115.211.50.97:8118'proxy.add_to_capabilities(webdriver.DesiredCapabilities.PHANTOMJS)obj.start_session(webdriver.DesiredCapabilities.PHANTOMJS)obj.maximize_window()obj.get('http://fz12345.fuzhou.gov.cn/callcenter/callSearchDo.do')obj.set_page_load_timeout(15)  #等待时间obj.find_element_by_xpath("/html/body/div[2]/div/div[1]/div[5]/div[2]/div[2]/form/div[3]/ul/li[5]/a").click()a=obj.find_element_by_xpath("/html/body/div[2]/div/div[1]/div[5]/div[2]/div[2]/form/div[2]/table/tbody/tr[3]").textprint(a)obj.close()

 

转载于:https://www.cnblogs.com/xielongteng/p/7527949.html

你可能感兴趣的文章
Windows下MongoDB安装副本集
查看>>
JavaScript引用类型---Set
查看>>
关于JavaScript模块规范之CommonJS\AMD\CMD
查看>>
人机交互,加速机器人拟人化
查看>>
有赞vant-ui Tabs、List、PullRefresh组件实践
查看>>
mongodb学习笔记(1)--数据库安装
查看>>
Java语法糖的编译结果分析(一)
查看>>
python爬虫案例:抓取网易新闻
查看>>
Ajax的异步交互步骤
查看>>
PHP数组相关函数Demo及归纳
查看>>
初识flask和flask blueprint
查看>>
前端算法之弹幕设计
查看>>
微信小程序拼团后端接口设计规范.V2
查看>>
Python学习之路26-函数装饰器和闭包
查看>>
从单向到双向数据绑定
查看>>
关于跨域的what,why,how
查看>>
k8s :kube-apiserver 启动流程 - 2
查看>>
不使用任何额外变量判断回文数字
查看>>
配置永久生效(登陆shell和非登陆shell)、I/O重定向、Here Docunmet 此处文档、管道、tee...
查看>>
PHP设计模式- Decorator 装饰器模式
查看>>