ApacheBeam/Java/Dataflow中的会话窗口在早期触发器未在水印到达时触发“准时”面板问题。
创始人
2024-09-05 10:32:08
0

在Beam管道中使用会话窗口并设置早期触发器时,有时会出现“准时”面板未在水印到达时触发的问题。解决此问题的一种方法是使用稍后处理时间触发器。

以下是一个示例管道,其中使用带有早期触发器的会话窗口,并使用稍后处理时间触发器来解决上述问题:

public class SessionWindowTest {
    public static void main(String[] args) {

        PipelineOptions options = PipelineOptionsFactory.create();
        Pipeline pipeline = Pipeline.create(options);

        List>> input = Arrays.asList(
                TimestampedValue.of(KV.of("key", 1), new Instant(1)), // First Session
                TimestampedValue.of(KV.of("key", 2), new Instant(2)),
                TimestampedValue.of(KV.of("key", 3), new Instant(3)),
                TimestampedValue.of(KV.of("key", 4), new Instant(5)), // Second Session
                TimestampedValue.of(KV.of("key", 5), new Instant(6)),
                TimestampedValue.of(KV.of("key", 6), new Instant(7)),
                TimestampedValue.of(KV.of("key", 7), new Instant(9))  // Third Session
        );

        PCollection> inputCollection = pipeline
                .apply(Create.timestamped(input))
                .apply(MapElements
                        .into(TypeDescriptors.kvs(TypeDescriptors.strings(), TypeDescriptors.integers()))
                        .via((TimestampedValue> tv) -> tv.getValue())
                );

        inputCollection
                .apply(Window.>into(Sessions.withGapDuration(Duration.standardSeconds(2)))
                        .triggering(
                                Repeatedly.forever(
                                        AfterProcessingTime.pastFirstElementInPane()
                                                .plusDelayOf(Duration.standardSeconds(5))))
                        .discardingFiredPanes

相关内容

热门资讯

揭幕透视!wepoker私人局... 揭幕透视!wepoker私人局俱乐部,微乐辅助软件购买平台,机巧教程(的确有挂)-哔哩哔哩1、wep...
曝光透视!wepoker破解游... 曝光透视!wepoker破解游戏盒子,微乐小程序免费黑科技在线下载,策略教程(有挂技巧)-哔哩哔哩1...
有挂透视!智星菠萝有挂吗,微信... 有挂透视!智星菠萝有挂吗,微信小程序游戏破解器,窍门教程(揭秘有挂)-哔哩哔哩进入游戏-大厅左侧-新...
曝光透视!wepoker究竟有... 曝光透视!wepoker究竟有没有透视,微信小程序游戏破解微乐辅助,要领教程(有挂分析)-哔哩哔哩w...
关于透视!扑克之星辅助,微信小... 关于透视!扑克之星辅助,微信小程序微乐跑得快技巧,总结教程(发现有挂)-哔哩哔哩1、超多福利:超高返...
详细透视!wepoker透视版... 详细透视!wepoker透视版下载,微信微乐辅助透视,诀窍教程(有挂功能)-哔哩哔哩该软件可以轻松地...
了解透视!德州局怎么透视,微信... 了解透视!德州局怎么透视,微信微乐辅助器免费安装,阶段教程(有挂解惑)-哔哩哔哩1、在德州局怎么透视...
有挂透视!wepoker软件安... 有挂透视!wepoker软件安装包,微信小程序微乐辅助免费,手筋教程(有挂秘籍)-哔哩哔哩该软件可以...
详情透视!hhpoker有没有... 详情透视!hhpoker有没有辅助,微信小程序微乐游戏修改器,方案教程(有挂技巧)-哔哩哔哩1、完成...
曝光透视!佛手在线大菠萝技巧,... 曝光透视!佛手在线大菠萝技巧,微乐科技软件下载,教程书教程(有挂功能)-哔哩哔哩在进入佛手在线大菠萝...