楼主: yaoyinuo888
1254 3

[问答] requests 抓取不到网站的信息 [推广有奖]

  • 0关注
  • 0粉丝

硕士生

30%

还不是VIP/贵宾

-

威望
0
论坛币
1317 个
通用积分
0
学术水平
2 点
热心指数
2 点
信用等级
2 点
经验
1341 点
帖子
102
精华
0
在线时间
140 小时
注册时间
2016-6-26
最后登录
2022-2-8

楼主
yaoyinuo888 在职认证  发表于 2018-1-8 11:59:06 |AI写论文

+2 论坛币
k人 参与回答

经管之家送您一份

应届毕业生专属福利!

求职就业群
赵安豆老师微信:zhaoandou666

经管之家联合CDA

送您一个全额奖学金名额~ !

感谢您参与论坛问题回答

经管之家送您两个论坛币!

+2 论坛币
import re
import requests
r=requests.get('https://s.taobao.com/search?q=python&s=1&ie=utf8')
r.encoding = 'utf-8'
print(r)
print(r.url)
print(r.text)

LZ是小白,刚开始学python,print(r.text)没办法得到网站的信息,请问该怎么办?
二维码

扫码加我 拉你入群

请注明:姓名-公司-职位

以便审核进群资格,未注明则拒绝


1111.png (6.8 KB)

1111.png

沙发
gjinwei 发表于 2018-1-9 13:41:34
刚刚测了下,需要带cookie访问。使用参考http://www.python-requests.org/en/master/user/quickstart/#cookies

藤椅
yaoyinuo888 在职认证  发表于 2018-1-10 11:11:50
gjinwei 发表于 2018-1-9 13:41
刚刚测了下,需要带cookie访问。使用参考http://www.python-requests.org/en/master/user/quickstart/#cook ...
非常感谢!
大神再请教一下,怎么判断一个网页登陆需要cookie?

板凳
gjinwei 发表于 2018-1-10 13:11:00
yaoyinuo888 发表于 2018-1-10 11:11
非常感谢!
大神再请教一下,怎么判断一个网页登陆需要cookie?
先取得浏览器请求的所有参数,然后用工具不断去试,看网站怎么才有稳定返回,就像这样:
QQ图片20180110130803.png

您需要登录后才可以回帖 登录 | 我要注册

本版微信群
加好友,备注cda
拉您进交流群
GMT+8, 2026-1-21 19:58