V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
cylaw
V2EX  ›  Java

请教一个 Starrocks JDBC 流式查询的问题

  •  
  •   cylaw · 1 天前 · 503 次点击
    最近有一个需求:web 查询 starrocks 的数据并导出到 excel ,数据量比较大,大概有几十万。
    导出方案是:原始 jdbc 或 mybatis 流式查询数据 -> easyexcel 流式写入 excel -> 上传 oss 。
    这个方案在 clickhouse 上实践过是 ok 的。
    现在有部份业务使用到了 starrocks ,查了很多资料,没有明确说明 starrocks jdbc 是否支持流式查询。
    请教各位大佬
    1. starrocks 是否支持 jdbc 流式查询?
    2. 如果支持,对 starrocks 本身有什么影响?
    3. 如果不支持,对非主键表有什么方式可以解决深分页的问题?
    3 条回复    2025-02-21 18:07:47 +08:00
    yidinghe
        1
    yidinghe  
       1 天前
    只要支持游标,就肯定支持流式查询。
    codingmiao
        2
    codingmiao  
       1 天前
    研究一下配置应该就行了,比如 mysql 查询一百万数据,不设置行数的话是一百万一波拉回来内存,游标 next 再去内存里取
    关于   ·   帮助文档   ·   博客   ·   API   ·   FAQ   ·   实用小工具   ·   2520 人在线   最高记录 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 19ms · UTC 10:57 · PVG 18:57 · LAX 02:57 · JFK 05:57
    Developed with CodeLauncher
    ♥ Do have faith in what you're doing.