下载深交所年报python

相似文件 换一批

是 否 +2 论坛币

k人 参与回答

经管之家送您一份

应届毕业生专属福利!

求职就业群

赵安豆老师微信：zhaoandou666

经管之家联合CDA

送您一个全额奖学金名额~ !

立即领取

感谢您参与论坛问题回答

经管之家送您两个论坛币！

+2 论坛币

写过两篇帖子，关于如何从巨潮资讯网以及上交所下载年报：
https://bbs.pinggu.org/thread-7320099-1-1.html
https://bbs.pinggu.org/thread-7292296-1-1.html
本来想把深交所爬取同样放在上一篇帖子中，但是发现深交所采用的是post请求中的payload方式
在写的时候没反应过来，琢磨了一下才弄懂代码该怎么写。
也就是需要用到payload为参数进行访问。
比如
`{"seDate":["",""],"channelCode":["fixed_disc"],"bigCategoryId":["010301"],"pageSize":30,"pageNum":2}`

## 代码的基本思路
1. 获取深交所所有上市公司PDF的地址
2. 通过访问PDF地址进行下载


代码如下：
爬取深交所.txt (3.52 KB, 需要: 10 个论坛币)

2019-9-17 20:57:24 上传

需要: 10 个论坛币  [购买]

（代码有误）
在使用中发下代码编写有误，故重现附上更正后的代码：
批量下载深交所年报(更正).txt (3.44 KB, 需要: 10 个论坛币)

2019-9-23 10:02:23 上传

需要: 10 个论坛币  [购买]

（代码有误）
感谢南风拂面 的意见，（实在抱歉）因为网站访问到第500页后无法显示，爬取报错，只能以三年为单位，分多次下载。代码如下：
分年度下载.txt (4.05 KB, 需要: 10 个论坛币)

2019-11-14 19:48:15 上传

需要: 10 个论坛币  [购买]

扫码加我 拉你入群

请注明：姓名-公司-职位

以便审核进群资格，未注明则拒绝

分享0 收藏29 回帖

关键词：python 爬虫 年报

请用论坛币购买过的此代码的朋友私信邮箱，会将更正后的代码发到邮箱

您好，在使用您的深交所年报代码时出现如下错误

1. 爬取深交所年报下载地址第501页
   
2. Traceback (most recent call last):
   
3. 
   
4.   File "C:/Users/nanfeng/Documents/深交所年报.py", line 41, in <module>
   
5.     num = len(result['data'])
   
6. 
   
7. KeyError: 'data'

复制代码

向您求教，恳请指导一二

南风拂面 发表于 2019-11-14 19:18
您好，在使用您的深交所年报代码时出现如下错误

向您求教，恳请指导一二

你好，我再次检查了一下代码，实在抱歉，当时写代码没有发现这个失误，因为网站超过500后访问就无法访问了，最多显示500页内容，所以现在新写了一份代码（以三年为一个时间段进行下载）。实在抱歉，麻烦留下邮箱。

dream1095 发表于 2019-11-14 19:45
你好，我再次检查了一下代码，实在抱歉，当时写代码没有发现这个失误，因为网站超过500后访问就无法访问了 ...

麻烦您了 打扰了您好几次 1243439689@qq.com
非常感谢

408796054@qq.com  谢谢！

xiang8482890 发表于 2019-11-15 06:17
408796054@qq.com  谢谢！

你好，这边没看到这个ID的购买记录，是用其他账号购买的吗？麻烦说下一下ID

2544532289@qq.com谢谢

楼主，我在用分年度爬取深交所年报的时候出现出现了这种情况:requests.exceptions.ConnectionError: ('Connection aborted.', ConnectionResetError(10054, '远程主机强迫关闭了一个现有的连接。', None, 10054, None)),请问有什么解决办法吗？