相关文章推荐
淡定的排球  ·  【Axure教程】手机键盘输入框原型-阿里云 ...·  2 月前    · 
性感的钱包  ·  浅谈windows 驱动开发-阿里云开发者社区·  2 月前    · 
玩篮球的圣诞树  ·  智联车管理云平台有哪些应用场景_自动驾驶云开 ...·  2 月前    · 
苦恼的山羊  ·  面试官:SOA ...·  2 月前    · 
小百科  ›  Flink SQL 对推后数据怎么处理?-问答-阿里云开发者社区-阿里云
云计算 大数据 阿里
不羁的小刀
1 年前
产品 解决方案 文档与社区 免费试用 定价 云市场 合作伙伴 支持与服务 了解阿里云
备案 控制台 登录/注册
开发者社区
首页
探索云世界
新手上云 云上应用构建 云上数据管理 云上探索人工智能
云计算 弹性计算 无影 存储 网络 倚天
云原生 容器 serverless 中间件 微服务 可观测 消息队列
数据库 关系型数据库 NoSQL数据库 数据仓库 数据管理工具 PolarDB开源 向量数据库

热门

Modelscope模型即服务 弹性计算 云原生 数据库 物联网 云效DevOps 龙蜥操作系统 平头哥 钉钉开放平台
大数据 大数据计算 实时数仓Hologres 实时计算Flink E-MapReduce DataWorks Elasticsearch 机器学习平台PAI 智能搜索推荐
人工智能 机器学习平台PAI 视觉智能开放平台 智能语音交互 自然语言处理 多模态模型 pythonsdk 通用模型
开发与运维 云效DevOps 钉钉宜搭 支持服务 镜像站 码上公益
问产品
动手实践
考认证
TIANCHI大赛
活动广场
任务中心 飞天Club技术沙龙 训练营 话题 开发者评测 乘风者计划 阿里云MVP 直播
下载
镜像站 技术资料 插件

Flink SQL 对延迟数据怎么处理?-问答-阿里云开发者社区-阿里云

开发者社区 >

请教一下,FlinkSQL中,我在创建表时设置了watermark并设置了最大延迟,可是还是有数据依旧会迟到晚到,对于这样的数据我们又不想直接丢弃,那这个依旧迟到的数据我该怎么收集?是否有与StreamAPI一样可以将依旧迟到的数据进行分流的方案?

*来自志愿者整理的flink邮件归档

据我所知,FlinkSQL 不支持将迟到的数据输出到侧流中。 如果你下游使用的是 window 的话,可以通过设置 table.exec.emit.late-fire.enabled 和 table.exec.emit.late-fire.delay 来触发晚于 watermark 到达的数据。 其中允许等待晚与 watermark 的数据的时间由 table.exec.state.ttl 控制,等价于 Datastream 中的 allowedLateness, 故 window 的最大等待时间为 watermark 的 outOfOrder + allowedLateness。

*来自志愿者整理的flink邮件归档

2021-12-06 11:26:58 企业邮箱发送邮件时,若出现投递失败产生退信,内容提示包含如下: the mta server of * reply:550 failed to meet SPF requirements 或者 the mta server of 163.com — 163mx01.mxmail.netease.com(220.181.14.141) reply:550 MI:SPF mx14,QMCowECpA0qTiftVaeB3Cg—.872S2 1442548128 http://mail.163.com/help 302806 Seata分布式事务源码分析 windows下mysql连接出现的问题 mysql查询出现QSqlQuery::value: not positioned on a valid record 深度学习Keras轻松完成神经网络模型搭建 华为数据库工程师面试题目
 
推荐文章
淡定的排球  ·  【Axure教程】手机键盘输入框原型-阿里云开发者社区
2 月前
性感的钱包  ·  浅谈windows 驱动开发-阿里云开发者社区
2 月前
玩篮球的圣诞树  ·  智联车管理云平台有哪些应用场景_自动驾驶云开发平台(ACDP)-阿里 ...
2 月前
苦恼的山羊  ·  面试官:SOA 和微服务的区别?这回终于搞清楚了!-阿里云开发者社区
2 月前
今天看啥   ·   Py中国   ·   codingpro   ·   小百科   ·   link之家   ·   卧龙AI搜索
删除内容请联系邮箱 2879853325@qq.com
小百科 - 百科知识指南
© 2024 ~ 沪ICP备11025650号