会话窗口

简介:

会话窗口(SESSION)通过session活动来对元素进行分组。会话窗口与滚动窗口和滑动窗口相比,没有窗口重叠,没有固定窗口大小。相反,当它在一个固定的时间周期内不再收到元素,即会话断开时,这个窗口就会关闭。
会话窗口通过一个间隔时间(gap)来配置,这个间隔定义了非活跃周期的长度。例如,一个表示鼠标点击活动的数据流可能具有长时间的空闲时间,并在其间散布着高浓度的点击。 如果数据在最短指定的间隔持续时间之后到达,则会开始一个新的窗口。
下图展示了一个会话窗口,注意每个key由于不同的数据分布有不同的window。

HUI

语法

SESSION函数用在GROUP BY子句中定义会话窗口。

 
  
  1. SESSION(<time-attr>, <gap-interval>)
  2. <gap-interval>: INTERVAL 'string' timeUnit

参数必须是流中的一个合法的时间属性字段,即指定了processing time或是event time。

您可以参考时间属性章节了解如何定义时间属性和watermark。

标识函数

使用标识函数选出窗口的起始时间或者结束时间,窗口的时间属性用于下级window的聚合。

窗口标识函数 返回类型 描述
SESSION_START(time-attr, size-interval) Timestamp 返回窗口的起始时间(包含边界)。如[00:10, 00:15) 的窗口,返回00:10
SESSION_END(time-attr, size-interval) Timestamp 返回窗口的结束时间(包含边界)。如[00:00, 00:15] 的窗口,返回00:15
SESSION_ROWTIME(time-attr, size-interval) Timestamp(rowtime-attr) 返回窗口的结束时间(不包含边界)。如 [00:00, 00:15] 的窗口,返回 00:14:59.999 。返回值是一个rowtime attribute,也就是可以基于该字段做时间类型的操作,如级联窗口。

案例

统计每个用户在每个活跃会话期间的点击次数,会话超时时间30秒。

 
  
  1. CREATE TABLE user_clicks(
  2. username varchar,
  3. click_url varchar,
  4. ts timeStamp,
  5. WATERMARK wk FOR ts as withOffset(ts, 2000) -- rowtime定义watermark
  6. ) with (
  7. type='datahub',
  8. ...
  9. );
  10. CREATE TABLE tumble_output(
  11. window_start TIMESTAMP,
  12. window_end TIMESTAMP,
  13. username VARCHAR,
  14. clicks BIGINT
  15. ) with (
  16. type='rds'
  17. );
  18. INSERT INTO tumble_output
  19. SELECT
  20. SESSION_START(ts, INTERVAL '30' SECOND),
  21. SESSION_END(ts, INTERVAL '30' SECOND),
  22. username,
  23. COUNT(click_url)
  24. FROM user_clicks
  25. GROUP BY SESSION(ts, INTERVAL '30' SECOND), username

测试数据

username (VARCHAR) click_url (VARCHAR) ts (TIMESTAMP)
Jark http://taobao.com/xxx 2017-10-10 10:00:00.0
Jark http://taobao.com/xxx 2017-10-10 10:00:10.0
Jark http://taobao.com/xxx 2017-10-10 10:00:49.0
Jark http://taobao.com/xxx 2017-10-10 10:01:05.0
Jark http://taobao.com/xxx 2017-10-10 10:01:58.0
Timo http://taobao.com/xxx 2017-10-10 10:02:10.0

测试结果

window_start (TIMESTAMP) window_end (TIMESTAMP) username (VARCHAR) clicks (BIGINT)
2017-10-10 10:00:00.0 2017-10-10 10:00:40.0 Jark 2
2017-10-10 10:00:49.0 2017-10-10 10:01:35.0 Jark 2
2017-10-10 10:01:58.0 2017-10-10 10:02:28.0 Jark 1
2017-10-10 10:02:10.0 2017-10-10 10:02:40.0 Timo 1
本文转自实时计算—— 会话窗口
相关文章
|
Linux iOS开发 MacOS
DBeaver用户界面窗口失效 查询窗口不显示
DBeaver用户界面窗口失效 查询窗口不显示
|
3天前
创建窗口
创建窗口。
9 2
|
7月前
45EasyUI 窗口- 创建简单窗口
45EasyUI 窗口- 创建简单窗口
24 0
|
C++
201403-2 窗口
201403-2 窗口
65 0
201403-2 窗口
|
PHP 数据安全/隐私保护 Web App开发
会话控制
会话控制指网站可以跟踪客户端与服务器之间的交互。 由于HTTP是一个无状态的协议,此协议无法来维护两个事务之间的联系 所谓无状态,指的是不会维护http请求数据,http请求是独立的,不持久的HTTP无法告诉我们这两个请求是来自同一个人。比如 登录跳到留言板等 所以需要使用会话控制。
1683 0
|
SQL 测试技术 流计算
|
网络安全 Ubuntu 开发者
使用 tmate 分享你的终端会话
不久前,我们写过一篇关于 teleconsole 的介绍,该工具可用于快速分享终端给任何人(任何你信任的人)。今天我们要聊一聊另一款类似的应用,名叫 tmate。 tmate 有什么用?它可以让你在需要帮助时向你的朋友们求助。
1974 0
|
Windows
win7经常出现“关闭xxxx前您必须关闭所有会话框”
这可能是windows的一个BUG,在没有关闭输入法的状态下它不默认你关闭了所有窗口,只要把输入法切换回默认的英文输入法就可以正常关闭了
942 0