批量爬取安居客房价信息python 程序

是 否 +2 论坛币

k人 参与回答

经管之家送您一份

应届毕业生专属福利!

求职就业群

赵安豆老师微信：zhaoandou666

经管之家联合CDA

送您一个全额奖学金名额~ !

立即领取

感谢您参与论坛问题回答

经管之家送您两个论坛币！

+2 论坛币

在网上找了一大圈，带有界面的爬虫软件都很贵，买不起啊。各种语言写的爬虫程序试过了，都不好用。最后发现其实安居客有反爬虫的设置，一般的 request 对它不管用。有些大牛伪装浏览器操作写了爬虫，确实可行，但是提供的代码有些错误。Bug虽然不是很大，但是新手还是用不了。我花了一下午的时间改进了一下，实测可用。
使用之前先下载 webdriver.exe

http://chromedriver.storage.googleapis.com/index.html

一定要根据自己的谷歌浏览器版本号下载，比如我的浏览器版本是88.0.4324.27，就下载对应这个的。

下载后放到python3.7exe所在的文件夹目录下， 我的是D:\Python37
同时再放到谷歌浏览器的目录下，我的是 C:\Program Files\Google\Chrome\Application


最后注册goggle浏览器的环境变量.


这样配置完就可以用了


anju.rar (1.25 KB, 需要: RMB 15 元) 本附件包括：

• anju.py

2021-2-28 16:39:07 上传

安居客
需要: RMB 15 元  [购买]

扫码加我 拉你入群

请注明：姓名-公司-职位

以便审核进群资格，未注明则拒绝

分享0 收藏2 回帖

关键词：python Application Program Request storage

你好，有没有详细的安居客各个楼盘的房价信息