关于大量数据导出到 excel 或 csv 实现方案

[imherer]

最近有个需求，需要将 PostgreSQL 里的数据导出到 excel 里（或者 csv ），可能出现的情况有 3 种：

• 1.导出单张表某个时间段的数据
• 2.导出单张的全部数据
• 3.导出所有表的全部数据（一张表一个文件存储）

现在问题是如果导出的数据太大的话会 OOM，如何解决呢？

现在想预估一个安全行数，在导出的行数达到安全行数后就保存这个 excel，然后再从数据库读取再追加到这个 excel 里。疑问是再次向这个文件里追加数据的时候这个文件里之前已有的数据会载到内存里来吗？

有做过的前辈分享下经验吗？

语言：go

公司内部项目，所以用户量很少，基本上就几个人使用

[jalena]

不是又个命令是 copy 嘛，可以直接输出到文件

[cmonkey]

是时候让公司那几个人学习 PostgreSQL 了，给他们开 read 权限

[imherer]

@cmonkey 😂😅

[imherer]

@jalena 嗯，目前就是这样实现的

[yogogo]

先导出到服务器，再把文件下载

[shangfabao]

用 postgresql 自带命令执行不好么？？