发布于 2022-05-30
摘要
1.八大元素定位方式 driver.find_element_by_id(‘text’) 通过id去定位控件【在web端ID一般是 …
爬虫
发布于 2022-05-30
摘要
基本流程 创建sitemap:定要爬取网站的域名 构建爬虫拓扑图 创建selector:选取当前页面需要爬取的元素可以是文本、链接 …
发布于 2022-05-29
摘要
如果我们用BeautifulSoup去解析网页来爬虫，那么90%以上需要用到find_all（），当然如果对CSS更为了解，其实s …
发布于 2022-05-29
摘要
一般来说，可以用scrapy中自带的xpath或者css来提取数据，定义在spiders/jobbole.py中的def pars …
发布于 2022-05-29
摘要
Scrapy中response介绍： response属性： url ：HTTP响应的url地址,str类型 status：HTT …
发布于 2021-09-18
摘要
Requests数据抓取 预备:Requests库的安装 pip 安装方法： Windows系统:打开cmd以后键入pip ins …