flink-user-zh mailing list archives

Site index · List index
Message view « Date » · « Thread »
Top « Date » · « Thread »
From "cousin-gmail" <a773807...@gmail.com>
Subject 答复: 回复:数据量问题
Date Thu, 21 Feb 2019 08:51:19 GMT
好的,我去了解一下。谢谢

-----邮件原件-----
发件人: 浪人 [mailto:1543332110@qq.com] 
发送时间: 2019年2月21日 16:35
收件人: user-zh <user-zh@flink.apache.org>
主题: 回复:数据量问题

像这种需求,推荐使用continuesTrigger或是使用更加底层API processfunction去处
理,不要使用常规的滑动窗口去操作,性能低,资源消耗大。




------------------ 原始邮件 ------------------
发件人: "cousin-gmail"<a773807943@gmail.com>;
发送时间: 2019年2月21日(星期四) 下午4:31
收件人: "user-zh"<user-zh@flink.apache.org>;

主题: 数据量问题



         嘿,各位,我想问问,如果一天1.5亿数据量的记录,要查询最近一小时内的
聚集数量,那么,有什么比较好的方案?如果是用1小时窗口,10秒滑动一次,这样子
貌似需要维持360个窗口了,这样子的话,大概需要多少内存呢?
Mime
View raw message