Skip to content

添加 boss-zhipin-scraper 到网络爬虫分类#144

Open
eatmoreduck wants to merge 1 commit into
jobbole:masterfrom
eatmoreduck:add-boss-zhipin-scraper
Open

添加 boss-zhipin-scraper 到网络爬虫分类#144
eatmoreduck wants to merge 1 commit into
jobbole:masterfrom
eatmoreduck:add-boss-zhipin-scraper

Conversation

@eatmoreduck

Copy link
Copy Markdown

项目信息

简介

一个轻量的 BOSS直聘爬虫工具:通过 Chrome DevTools Protocol 直连本地已登录的 Chrome,复用真实登录态调用 zhipin.com 搜索 API,绕过前端字体反爬,直接拿到明文薪资的职位数据(JSON / CSV),并自动生成薪资分布、技能词频和求职材料优化提示词。

为什么收录到「网络爬虫」分类

  • 纯 Python 实现,核心是爬取网络站点(BOSS直聘职位数据)
  • 技术路线与现有条目互补:现有列表以 Scrapy / Selenium 类框架为主,本项目代表了一种「CDP 直连真实浏览器 + 调用页面内 API」的爬虫思路,绕过字体反爬、复用真实登录态
  • 输出结构化数据(JSON/CSV)+ 聚合分析,实用性强

主要特点

  • 明文薪资:走 API 模式,天然绕过字体反爬
  • CDP 直连真实 Chrome:不启受控浏览器,复用真实指纹和登录态
  • JSON / CSV 双格式输出,详情页 JD 一并抓
  • 抓取后聚合分析:薪资分布、经验/学历要求、高频技能词、高频公司
  • AI 求职提示词:基于岗位数据生成可复制提示词(明确不读取本地简历、不虚构经历)
  • 增量写入 + 持久隔离 Chrome profile

格式

按现有列表格式追加了一行到「网络爬虫」分类末尾(RoboBrowser 之后):

*   [boss-zhipin-scraper](https://github.com/eatmoreduck/boss-zhipin-scraper):基于 Chrome DevTools Protocol 直连本地已登录 Chrome 的 BOSS直聘爬虫,复用真实登录态调搜索 API,绕过字体反爬拿到明文薪资,并生成薪资分布与求职材料优化提示词。

Sign up for free to join this conversation on GitHub. Already have an account? Sign in to comment

Labels

None yet

Projects

None yet

Development

Successfully merging this pull request may close these issues.

1 participant