Chain Zhang Ispider Save

简单爬虫实现

Project README

简单爬虫实现

使用golang实现简单的爬虫

使用cron定时爬取数据

api接口

/v1/book : 获取小说列表

/v1/book/getchapters?bookid=1&page=1 : 获取指定小说的章节,分页查询,每页10章

/v1/book/chapter?id=950 : 获取指定章节详细内容

给朋友们推荐一下最近发现的一个很好用的全球代理:SmartProxy 拥有1亿真实住宅IP资源,作为专业海外http代理商,覆盖全球城市,高匿稳定提供100%原生住宅IP,而且支持社交账户、电商平台、网络数据收集等服务。 伪装度相当高!本人测试用过之后感觉很不错。 搞跨境电商还可以用来tiktok养号,高速解决ip限制问题。 现在春季价格优惠,动态住宅代理只要65折!

image

点我加入 https://www.smartproxy.cn

邀请码:B6V9HW

Open Source Agenda is not affiliated with "Chain Zhang Ispider" Project. README Source: chain-zhang/ispider
Stars
46
Open Issues
2
Last Commit
1 year ago
Repository

Open Source Agenda Badge

Open Source Agenda Rating