Go 高效抓取 Boss直聘职位数据

小码农2021 的个人博客 / 205 / 0 / 创建于 2年前 / 更新于 2年前

用Go实现抓取Boss直聘职位数据。有几个特点

1.实现更换IP功能。

2.模拟浏览器访问,不会被Boss识别为爬虫。

3.控制爬取频率，降低被封。

4.多协程爬取,提升效率。

github地址: github.com/githubw2015/crawler-bos...

本作品采用《CC 协议》，转载必须注明作者和本文链接

8 声望

高级Golang开发 @ 暂无

暂无个人描述~

推荐文章：

更多推荐...

分享一本一直更新的Gitbook，[为你自己学Go] 18 / 11 |

为数据库组件铺路，超好用的 go 集合（collection）库来了 18 / 6 |

Go 语言—数据结构和算法项目推荐 37 / 4 |

简单又好用的高效工具 19 / 6 |

colly 自动抓取资讯 12 / 5 |

讨论数量: 0

(=￣ω￣=)··· 暂无内容！

讨论应以学习和精进为目的。请勿发布不友善或者负能量的内容，与人为善，比聪明更重要！

帮助

高级Golang开发 @ 暂无

私信

文章归档

1 篇 2021 年 7 月

2年前 Go 高效抓取 Boss直聘职位数据

2 Go 高效抓取 Boss直聘职位数据

成为赞助商