如何使用Python爬取BOSS职位薪酬?
- 更新时间:2021-07-20 09:28:42
- 编辑:苏宏峻
给寻找编程代码教程的朋友们精选了相关的编程文章,网友咸清茹根据主题投稿了本篇教程内容,涉及到Python相关内容,已被229网友关注,内容中涉及的知识点可以在下方直接下载获取。
参考资料
- 流利的Python语言 第2版(影印版) PDF 电子书 / 55.6 MB / Luciano Ramalho 推荐度:
- 《OpenCV 3计算机视觉:Python语言实现(原书第2版)》源代码 配套资源 / 29.19 MB / 乔·米尼奇诺 推荐度:
- Python入门经典 PDF 电子书 / 48.1 MB / KatieCunningham 推荐度:
- 看漫画学Python:有趣、有料、好玩、好用 PDF 电子书 / 136 MB / 关东升 赵大羽 推荐度:
- Python性能分析与优化 PDF 电子书 / 6.3 MB / 多格里奥,陶俊杰陈小莉 推荐度:
正文内容
无意中在网上看到《如何使用Python爬取BOSS职位薪酬?》,感觉很有用处,重新排版了一下发到这里,希望大家能有所收获。
数据来源的一个重要途径就是爬虫,有了数据才能进行后续的数据分析和办公自动化。比如本期主题想找一份Python开发类工作,可以在BOSS直聘网上查找,薪酬在15-40k之间比比皆是。这种垂直类渠道网站比较有针对性,可以很快找到目标岗位的职位,分类也比较细。具体来看下实现方式。
1、相关库的导入
import time import csv from selenium import webdriver from lxml import etree import random
2、计算总页数
try: next_page_tag = driver.find_element_by_xpath("//a[@class='next']") next_page_tag.click() flag = True time.sleep(3) except: flag = False print("如果没有找到,这里可以认为到了最后一页")
3、匹配职位
html = etree.HTML(page_source) info_links = html.xpath("//div[@class='job-list']/ul/li") print(info_links) for link in info_links: name = link.xpath(".//span[@class='job-name']/a/text()") print(name)
4、最终结果
本章目标实现抓取“Python”的职位薪酬,并保存到CSV文件中。现已实现,大家如果有类似需求,可以自行尝试学习下哦~
相关教程
-
python元组拆包实现方法
在本篇文章里小编给大家整理的是一篇关于python元组拆包实现方法及相关实例,有兴趣的朋友们可以学习下。
发布时间:2021-05-02
-
Python3.7实现中控考勤机自动连接
这篇文章主要为大家详细介绍了Python3.7实现中控考勤机自动连接,具有一定的参考价值,感兴趣的小伙伴们可以参考一下
发布时间:2019-06-03