楼主: haichao1990
1397 3

[问答] 3GB左右的xml数据大文件如何读取到Excel表或者数据库呢 [推广有奖]

  • 0关注
  • 0粉丝

大专生

91%

还不是VIP/贵宾

-

威望
0
论坛币
0 个
通用积分
0
学术水平
0 点
热心指数
0 点
信用等级
0 点
经验
395 点
帖子
35
精华
0
在线时间
75 小时
注册时间
2015-10-12
最后登录
2019-3-29

楼主
haichao1990 发表于 2016-12-1 22:32:42 |AI写论文

+2 论坛币
k人 参与回答

经管之家送您一份

应届毕业生专属福利!

求职就业群
赵安豆老师微信:zhaoandou666

经管之家联合CDA

送您一个全额奖学金名额~ !

感谢您参与论坛问题回答

经管之家送您两个论坛币!

+2 论坛币
1.jpg
像这样3GB左右的xml数据大文件如何读取到Excel表或者数据库呢?有大神吗?感激不尽。
谢谢!
二维码

扫码加我 拉你入群

请注明:姓名-公司-职位

以便审核进群资格,未注明则拒绝

关键词:Excel表 EXCEL xcel exce XML 数据库 Excel 如何 左右

沙发
hyu9910 在职认证  发表于 2016-12-1 22:40:44
数据量太大的话,EXCEL可能接受不了的。 大数据最好用文本格式或者压缩格式,CSV就是文本格式的。 数据量很大的时候,经常还能写入CSV文档,但是可能EXCEL打开看不到全部。

大数据对于常用的数据库操作应该没啥问题,除非小型的数据库可能对数据量有限制吧。

藤椅
felixzhao123 发表于 2016-12-2 07:25:46
建议可以尝试一下使用Excel里面的Power Query功能,这个功能可以突破Excel本身的限制。[

Power Query.PNG (82.26 KB)

Power Query.PNG

板凳
nuomin 发表于 2016-12-2 08:40:55
1)先从XML里抓取数据,由于文件较大,建议一行一行的读数据,抓数据
2)抓取1000条之后,处理数据问题后,一次性的往ODBC数据库里写
3)清理内存gc()

您需要登录后才可以回帖 登录 | 我要注册

本版微信群
加好友,备注cda
拉您进交流群
GMT+8, 2025-12-30 09:47