APP下载
[00044337]一种面向实时流计算的动态逐级反压方法
联系人： 浙江工业大学
所在地：浙江 杭州市
- 服务承诺
- 产权明晰
-
资料保密
对所交付的所有资料进行保密
- 如实描述
技术详细介绍
一种面向实时流计算的动态逐级反压方法，根据任务(Task)节点的当前自身负载情况来调整上游向其发送数据的速率，当某一Task过载导致延迟增加，上游的Bolt会减缓向下游发射的速率，更多的资源会被用来处理当前的正在处理的数据上，避免因阻塞、数据超时、重发等导致的延迟增加。当Task的负载降低至最小阈值且持续sensitivity秒，Task会向上游发送取消反压信号，上游Task收到取消反压信号后首先会检查自身是否处于反压状态，若是则会恢复上一次的发射速度，只有当组件恢复至初试速度时才会消除反压状态。本发明减少拓扑中单个任务对整体延迟的影响、反压过程平滑、系统不会出现负载振荡。
