请教下 V2 的大神们

258 天前
 chenxiansheng
请教下 V2 的大神们,如何在一台 32g 核显的设备商每秒钟写入 1000 万数据点,并且每隔一秒写一次,我这边使用的时序数据库,但是使用高并发写入最多也是 1s40 万数据点,有做过这方面的大佬吗,提供下想法也行.....
1519 次点击
所在节点    数据库
2 条回复
zzmark06
248 天前
只说 1000w 数据点,还得考虑这 1000w 条是什么格式。
json? kv? 还是什么
写入是流写还是批写
写入时效性要求是多少。
机器内存 32g ,网卡呢,1000w 行数据若是大点,千兆网卡必爆的。
chenxiansheng
247 天前
谢谢回复,后面已经解决了,方案是使用时序数据库提供的多表插入拼接语句,一条 sql 可以插入大概 1m 的数据,这样差不多一次就可以插入大几十张表了,然后分多个线程去插入,效果可以达到,注意管理面数据库连接池的问题就行

这是一个专为移动设备优化的页面(即为了让你能够在 Google 搜索结果里秒开这个页面),如果你希望参与 V2EX 社区的讨论,你可以继续到 V2EX 上打开本讨论主题的完整版本。

https://www.v2ex.com/t/1109609

V2EX 是创意工作者们的社区,是一个分享自己正在做的有趣事物、交流想法,可以遇见新朋友甚至新机会的地方。

V2EX is a community of developers, designers and creative people.

© 2021 V2EX