招聘网站爬取:API 端点 & 速查表
发布: (2026年1月10日 GMT+8 16:24)
1 分钟阅读
原文: Dev.to
Source: Dev.to
LinkedIn Guest Endpoint
URL: https://www.linkedin.com/jobs-guest/jobs/api/seeMoreJobPostings/search
Method: GET
Critical Headers
User-Agent: Mozilla/5.0 ... Chrome/120.0... # Use a real browser string
Upgrade-Insecure-Requests: 1
Parameters
| 参数 | 示例 / 描述 |
|---|---|
keywords | "software engineer" |
location | "Remote" |
start | 分页偏移量(0, 25, 50, …) |
f_TP | 1 – 过滤“最近 24 小时”的职位,以避免死链接 |
该端点返回干净的 JSON;无需进行 HTML 爬取。
Remotive API
URL: https://remotive.com/api/remote-jobs
Parameters
category=software-devlimit=10
响应为包含远程职位列表的 JSON 负载。
Arbeitnow API
URL: https://www.arbeitnow.com/api/job-board-api
该端点返回一个庞大的 JSON 列表;你可以在客户端侧进行过滤。
Rate Limiter (Python Snippet)
请求之间始终暂停,以避免 IP 被封禁。
import time
import requests
# Be polite
time.sleep(2)
response = requests.get(url, headers=headers)
如果你觉得这有用,可以查看原始仓库:
Zayan-Mohamed/til (如果对你有帮助,请给它点星!)