[讨论] csv档案大小1.7G, 该用什么免费数据库 ml919 PTT批踢踢实业坊

[讨论] csv档案大小1.7G, 该用什么免费数据库

楼主: ml919 (ml919) 2023-08-21 23:20:13

请教一下
我有csv档案大小从125mb到1.7G不等,
有什么免费的数据库可以上传吗?
或是需要付费,但价格不贵的.
我是学校系上的project要用的,需要汇整这些csv档案
我有试过MS sql server express and Matlab,
但有资料跑掉或out of memory的问题.
Oracle express edition则有其他问题,像是 ORA12560
有什么其他建议吗?
谢谢!!

作者: cancelpc (阿吉) 2023-08-21 23:39:00

posgresql

作者: konkonchou (卡卡猫) 2023-08-22 00:22:00

先想办法把csv分切成小档，这尺寸汇入容易发生错误

作者: championship (银光竹) 2023-08-22 12:38:00

如果是table类型的资料，可以考虑转成 parquet 格式，能有效降低空间

作者: dennisxkimo1 2023-08-29 23:39:00

你的ora listener 没启动成功上篇很明显建议拿简单的11gXE来玩电脑名称、win帐号避免中文网卡IP请设定不是DHCP的固定ip不然就玩postgresql ，巨量资料又肯学，NoSQL的mongo也行sql还是ora的express都有资源先天限制cpu ram跟空间都有限制，不管你的电脑买多好都没用

作者: pinkykk (品奇) 2023-08-31 09:47:00

可以参考各DB提供的大档汇入工具，如sqlload,bcp等

作者: yan960521 2023-09-23 17:43:00

postgredql 我跟你情况差不多每个csv都破百放postgresql还能合在一起处理

作者: xhining (拔刀欠人砍) 2023-09-24 14:11:00

sqlite3，很容易取得，虽然我手边的数据库没破G

继续阅读

Oracle 21c Express: ORA-12560: TNS:协定接口程ml919 [SQL ] 日期区间jeffher1024 [讨论] Mariadb备份资料不是最新的b60413 [SQL ] 公司出的题目求解(悬赏2000P)a27358942 Re: [讨论] 有人用过ragic数据库吗？bearching [讨论] 寻找硅晶圆价格的数据库ttyy802002 [SQL ] 进行封装汇入，程式码被清除(已解决)neujess Re: [讨论] 有人用过ragic数据库吗？jeffher1024 [SQL ] 想问关于MSSQL HA & replicaraynoz [SQL ] 类似 CURSOR 功能的自订函数kisha024