• Window Operations


    Window Operations 有点类似于Storm中的State,可以设置窗口的大小和滑动窗口的间隔来动态的获取当前Steaming的允许状态,可以对一段时间的数据进行处理。

    如图
    window length 为3秒
    sliding interval 为2秒
    batch interval of the source DStream 为1秒

    那么就可以通过window函数对每隔2秒,3秒内的数据进行处理

    window Operations一般有两个参数
    window length - window的时长
    sliding interval - 滑动间隔

    这两个值必须是DStream间隔的倍数

  • 相关阅读:
    每日日报16
    每日日报15
    每日日报14
    每日日报13
    每日日报12
    每日日报11
    每日日报10
    每日作业报告
    每日作业报告
    每日作业报告
  • 原文地址:https://www.cnblogs.com/heml/p/6780892.html
Copyright © 2020-2023  润新知