cylaw
V2EX  ›  Java

请教一个 Starrocks JDBC 流式查询的问题

  •  
  •   cylaw · Feb 20, 2025 · 3360 views
    This topic created in 485 days ago, the information mentioned may be changed or developed.
    最近有一个需求:web 查询 starrocks 的数据并导出到 excel ,数据量比较大,大概有几十万。
    导出方案是:原始 jdbc 或 mybatis 流式查询数据 -> easyexcel 流式写入 excel -> 上传 oss 。
    这个方案在 clickhouse 上实践过是 ok 的。
    现在有部份业务使用到了 starrocks ,查了很多资料,没有明确说明 starrocks jdbc 是否支持流式查询。
    请教各位大佬
    1. starrocks 是否支持 jdbc 流式查询?
    2. 如果支持,对 starrocks 本身有什么影响?
    3. 如果不支持,对非主键表有什么方式可以解决深分页的问题?
    3 replies    2025-02-21 18:07:47 +08:00
    yidinghe
        1
    yidinghe  
       Feb 21, 2025
    只要支持游标,就肯定支持流式查询。
    codingmiao
        2
    codingmiao  
       Feb 21, 2025
    研究一下配置应该就行了,比如 mysql 查询一百万数据,不设置行数的话是一百万一波拉回来内存,游标 next 再去内存里取
    About   ·   Help   ·   Advertise   ·   Blog   ·   API   ·   FAQ   ·   Solana   ·   931 Online   Highest 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 32ms · UTC 19:02 · PVG 03:02 · LAX 12:02 · JFK 15:02
    ♥ Do have faith in what you're doing.