rqxiao
V2EX  ›  Java

kafaka 里消息分优先级可以怎么样实现

  •  
  •   rqxiao · Dec 15, 2020 · 2989 views
    This topic created in 2041 days ago, the information mentioned may be changed or developed.

    rt 高优先级的消息可以优先被消费

    3 replies    2020-12-15 17:53:24 +08:00
    yukong
        1
    yukong  
       Dec 15, 2020   ❤️ 1
    首先是 kafka 你这个 kafaka 有点震惊我了
    yukong
        2
    yukong  
       Dec 15, 2020   ❤️ 1
    其次 kafka 是基于 partition 有序的一个消息队列没法天然实现优先级消费, 不过你可以搞点骚操作 给每个 partition 带上业务优先级,比如一个 topic 有 5 个分区 我们任务 0 号分区的优先级最高,生成者通过算法得出优先级发送指定分区,消费者每次 pull 数据优先 pull0 分区的数据以达到消息优先级的目的。
    vus520
        3
    vus520  
       Dec 15, 2020   ❤️ 1
    多个 Topic
    ok, 下一个。
    About   ·   Help   ·   Advertise   ·   Blog   ·   API   ·   FAQ   ·   Solana   ·   2994 Online   Highest 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 39ms · UTC 08:36 · PVG 16:36 · LAX 01:36 · JFK 04:36
    ♥ Do have faith in what you're doing.