如何用R语言爬取翻页url不变的网页

是 否 +2 论坛币

k人 参与回答

经管之家送您一份

应届毕业生专属福利!

求职就业群

赵安豆老师微信：zhaoandou666

经管之家联合CDA

送您一个全额奖学金名额~ !

立即领取

感谢您参与论坛问题回答

经管之家送您两个论坛币！

+2 论坛币

本人刚开始学习R语言，怕网页遇到个问题。用以下代码爬取了首页表格，之后想用for循环翻页发现翻页后url不变，查了半天度娘没找到方法！求大神解惑！
url <- "http://datacenter.mep.gov.cn/websjzx/report!list.vm?xmlname=1512478367400&roleType=CFCD2084&permission=null"
data <- read_html(url,encoding = "UTF-8")%>%html_nodes("div.report_main")%>%html_nodes("table.report-table")%>%html_table(header = T,trim=T,fill=T)%>%as.data.frame()

原网页：http://datacenter.mep.gov.cn/web ... 084&permission=null

扫码加我 拉你入群

请注明：姓名-公司-职位

以便审核进群资格，未注明则拒绝

分享0 收藏0 回帖

独脚蜥 发表于 2018-4-10 22:45
本人刚开始学习R语言，怕网页遇到个问题。用以下代码爬取了首页表格，之后想用for循环翻页发现翻页后url不变 ...

没人呢么

独脚蜥 发表于 2018-4-11 14:07
没人呢么

楼主可以尝试用python爬一下看看

此网站，还在试运行。。你给的网站的第一页面，源代码完整，第二页面就不行了。。审查元素的功能，也没有。。等其完善了，再试吧！！！
正常，若翻页面，网址不变，可通过“审查元素”（按鼠标右键，获得）功能中“Network" 可查找实际网址！！！

jgchen1966 发表于 2018-4-12 13:11
此网站，还在试运行。。你给的网站的第一页面，源代码完整，第二页面就不行了。。审查元素的功能，也没有。 ...

好的，谢谢指教！