查看 & 物化视图
Timeplus 有两种类型的视图:逻辑视图(或普通View)和物化视图(Materialized View)。
创建视图
您可以为所有类型的查询创建视图,并在其他查询中引用视图。
- 如果基于串流查询创建视图,您可以将视图视为虚拟流。 For example,
create view view1 as select * from my_stream where c1 = 'a'
will create a virtual stream to filter all events with c1 = 'a'. 您可以把这个视图当作另一个流来使用,例如select count(*) from tumble(view1,1m) group by window_start
创建一个视图本身并不会执行查询。 只有当其他查询引用这个视图时才能会展开视图对应的查询。 - a view could be a bounded stream if the view is created with a bounded query using table() function, e.g.
create view view2 as select * from table(my_stream)
then each time you runselect count(*) from view2
will return the current row number of the my_stream immediately without waiting for the future events.
请注意,基于流查询而创建的视图,不能通过 table(streaming_view)
将视图转换为历史查询
要创建原版视图,请执行以下操作:
CREATE VIEW [IF NOT EXISTS] <view_name> AS <SELECT ...>
创建物化视图
物化视图与常规视图之间的区别在于,物化视图在创建后一直在后台运行,由此产生的数据将写入内部存储(即所谓的物化)。
要创建物化视图,请执行以下操作:
创建物化视图 [如果不存在] <view_name>
AS <SELECT ...>
创建物化视图后,Timeplus 将在后台持续运行查询,并根据其底层流选择的语义逐步发出计算结果。
使用物化视图的不同方式:
-
流模式:
SELECT * FROM materialized_view
获取结果以备将来的数据。 这与视图的工作方式相同。 -
历史模式:
SELECT * 从表 (materialized_view)
获取物化视图的所有过去结果。 -
历史记录 + 流式模式:
SELECT * FROM materialized_view WHERE _tp_time>='1970-01-01'
获取所有过去的结果和未来的数据。 -
预聚合模式:
SELECT * 从表 (materialized_view) 其中 _tp_time in (SELECT max (_tp_time) 作为表 (materialized_view) 中的 m)
这会立即返回最新的查询结果。 如果_tp_time
在物化视图中不可用,或者最新聚合可以生成具有不同的_tp_time
的事件,则可以将emit_version ()
添加到物化视图中,为每个发射分配一个唯一的 ID,并选取最大的emit_version () 的事件
。 例如:创建物化视图 mv 为
选择 emit_version () 作为版本,window_start 作为时间,count () 为 n,max (speed_kmh) 作为 h 从 tumble (car_live_data,10s)
按 window_start,window_end 分组;
从表 (mv) 中选择 * 其中版本(从表 (mv) 中选择最大(版本));我们正在考虑提供新的语法来简化这一点。
目标流
By default, when you create a materialized view, an internal stream will be created automatically as the data storage. Querying on the materialized view will result in querying the underlying internal stream. 对物化视图进行查询将导致对底层内部流的查询。
指定目标流的用例:
- In some cases, you may want to build multiple materialized views to write data to the same stream. In this case, each materialized view serves as a real-time data pipeline. 在这种情况下,每个物化视图都充当实时数据管道。
- Or you may need to use Changelog Stream or Versioned Stream to build lookups.
- 或者,您可能需要为物化视图设置保留策略。
- 您还可以使用物化视图通过外部流向 Apache Kafka 写入数据。
要使用目标流创建物化视图,请执行以下操作:
创建物化视图 [如果不存在] <view_name>
INTO <target_stream> AS <SELECT ...>
拖放视图
运行以下 SQL 来删除视图或物化视图。
删除视图 [如果存在] 数据库。<view_name>;
像 CREATE STREAM一样,流删除是一个异步过程。