[经管数据集] Python爬虫程序源代码-豆瓣读书爬虫按评分排名依次存储 [推广有奖]

1关注
278
粉丝

已卖：21192份资源
好评率：99%
商家信誉：一般

巨擘

还不是VIP/贵宾

威望: 1 级
论坛币: 40750 个
通用积分: 2590.6735
学术水平: 20 点
热心指数: 31 点
信用等级: 7 点
经验: 7098 点
帖子: 20358
精华: 0
在线时间: 11858 小时
注册时间: 2020-12-8
最后登录: 2026-2-7

楼主

yusb

发表于 2023-11-25 16:26:12 |AI写论文

是否 +2 论坛币

k人参与回答

经管之家送您一份

应届毕业生专属福利!

求职就业群

赵安豆老师微信：zhaoandou666

经管之家联合CDA

送您一个全额奖学金名额~ !

立即领取

感谢您参与论坛问题回答

经管之家送您两个论坛币！

+2 论坛币

Python爬虫程序源代码-豆瓣读书爬虫按评分排名依次存储

## 豆瓣读书爬虫

Python所写，豆瓣读书的爬虫，方便大家搜罗各种美美书！

Python爬虫程序源代码-豆瓣读书爬虫按评分排名依次存储DouBanSpider-master.zip (13.59 MB, 需要: RMB 19 元)

### 更新

爬下了豆瓣所有的图书信息（3088633本，2138386KB），并做了一个界面方面与数据库交互来搜罗好书。

### 更新

爬书发现豆瓣的页面规则发生了变化，导致不能爬到评价人数，由此对代码进行了相应的更新，并爬了一些新的数据(并不全)。

### 实现功能

1 可以爬下豆瓣读书标签下的所有图书

2 按评分排名依次存储

3 存储到Excel中，可方便大家筛选搜罗，比如筛选评价人数>1000的高分书籍；可依据不同的主题存储到Excel不同的Sheet

4 采用User Agent伪装为浏览器进行爬取，并加入随机延时来更好的模仿浏览器行为，避免爬虫被封（更新于 2015-5-20）