Apache flink 链式燧石水槽

Apache flink 链式燧石水槽,apache-flink,flink-streaming,Apache Flink,Flink Streaming,背景 我是新来的弗林克和来自阿帕奇风暴的背景 正在开发无损gRPC接收器 症结所在 将根据gRPC端点返回的错误代码进行有限次数的重试 之后,数据将刷新到Kafka队列进行脱机处理 重试决定将基于返回的错误代码 问题 是否可以链接另一个接收器,以便响应(成功或错误)也可用于任何定制处理的下游?通常不可能,您必须解决这个问题,要么在单个接收器中提供这两种功能,要么使用一些现有功能(如AsyncIO)写入gRPC,然后将故障转移到kafka,但如果您需要任何强有力的保证,这可能会更加困难。

背景

  • 我是新来的弗林克和来自阿帕奇风暴的背景
  • 正在开发无损gRPC接收器
症结所在

  • 将根据gRPC端点返回的错误代码进行有限次数的重试
  • 之后,数据将刷新到Kafka队列进行脱机处理
  • 重试决定将基于返回的错误代码
问题


是否可以链接另一个接收器,以便响应(成功或错误)也可用于任何定制处理的下游?

通常不可能,您必须解决这个问题,要么在单个接收器中提供这两种功能,要么使用一些现有功能(如AsyncIO)写入gRPC,然后将故障转移到kafka,但如果您需要任何强有力的保证,这可能会更加困难。