第七色在线视频,2021少妇久久久久久久久久,亚洲欧洲精品成人久久av18,亚洲国产精品特色大片观看完整版,孙宇晨将参加特朗普的晚宴

為了賬號(hào)安全,請(qǐng)及時(shí)綁定郵箱和手機(jī)立即綁定
已解決430363個(gè)問題,去搜搜看,總會(huì)有你想問的

為什么我的 Kafka 消費(fèi)者投票這么快?

為什么我的 Kafka 消費(fèi)者投票這么快?

縹緲止盈 2023-03-09 14:05:15
我的 Kafka 消費(fèi)者的輪詢速度比我預(yù)期的要快。是否有一些配置我可以更改以使其一直等待fetch.max.wait.ms?我將 fetch.max.wait.ms 設(shè)置為某個(gè)秒數(shù) (5)。我設(shè)置fetch.min.bytes了一些大字節(jié)數(shù) (99,988,800)。我閱讀了文檔(但可能遺漏了一些內(nèi)容):https://kafka.apache.org/documentation/獲取.min.bytes服務(wù)器應(yīng)為獲取請(qǐng)求返回的最小數(shù)據(jù)量。如果可用數(shù)據(jù)不足,則請(qǐng)求將等待積累足夠多的數(shù)據(jù),然后再回答請(qǐng)求。1 字節(jié)的默認(rèn)設(shè)置意味著一旦單個(gè)字節(jié)的數(shù)據(jù)可用或獲取請(qǐng)求在等待數(shù)據(jù)到達(dá)時(shí)超時(shí),就會(huì)立即響應(yīng)獲取請(qǐng)求。將其設(shè)置為大于 1 的值將導(dǎo)致服務(wù)器等待大量數(shù)據(jù)的積累,這可以稍微提高服務(wù)器吞吐量,但會(huì)增加一些額外的延遲。fetch.max.wait.ms如果沒有足夠的數(shù)據(jù)立即滿足 fetch.min.bytes 給定的要求,服務(wù)器在回答獲取請(qǐng)求之前將阻塞的最長時(shí)間。fetch.max.wait.ms=5000, fetch.min.bytes=99988800根據(jù)我的配置選項(xiàng)和數(shù)據(jù)集,我希望調(diào)用poll在返回任何記錄之前始終阻塞 5 秒。相反,對(duì) 的調(diào)用poll有時(shí)會(huì)在不到一秒的時(shí)間內(nèi)解決,并且總是有一些少量的記錄。這是示例運(yùn)行的輸出:// send 100 records// doesn't matter how// timestamp -> records received// (date, hour and minute are not shown, just the relevant seconds.millis)32.475 -> 1033.392 -> 1234.116 -> 1637.477 -> 1638.395 -> 1839.118 -> 1742.479 -> 743.397 -> 4沒有延遲真的接近5s。
查看完整描述

2 回答

?
滄海一幻覺

TA貢獻(xiàn)1824條經(jīng)驗(yàn) 獲得超5個(gè)贊

對(duì)于財(cái)產(chǎn),fetch.max.wait.ms=5000您說:“即使沒有足夠的數(shù)據(jù)可供選擇,也不要等待超過 5 秒”。在執(zhí)行輪詢之前,您沒有指定最小秒數(shù)。您可以通過啟動(dòng) 2 個(gè) kafka 消費(fèi)者來測試此行為,其中一個(gè)是您設(shè)置的fetch.max.wait.ms=20000,另一個(gè)是保留默認(rèn)值。您會(huì)看到,在具有默認(rèn)設(shè)置的消費(fèi)者中,您幾乎會(huì)立即收到消息,而在消費(fèi)者中,fetch.max.wait.ms=20000您將不得不稍等片刻。我在我的機(jī)器上嘗試過設(shè)置fetch.max.wait.ms=20000,有時(shí)需要 15 秒才能接收記錄,有時(shí)需要 10 秒等等,但不會(huì)超過 20 秒。



查看完整回答
反對(duì) 回復(fù) 2023-03-09
?
慕沐林林

TA貢獻(xiàn)2016條經(jīng)驗(yàn) 獲得超9個(gè)贊

您還需要調(diào)整 max.partition.fetch.bytes、message.max.bytes 和 max.message.bytes。如果每條記錄的大小約為100KB,則10條記錄將觸發(fā)發(fā)送。這可能是你在你的案例中看到的。



查看完整回答
反對(duì) 回復(fù) 2023-03-09
  • 2 回答
  • 0 關(guān)注
  • 144 瀏覽

添加回答

舉報(bào)

0/150
提交
取消
微信客服

購課補(bǔ)貼
聯(lián)系客服咨詢優(yōu)惠詳情

幫助反饋 APP下載

慕課網(wǎng)APP
您的移動(dòng)學(xué)習(xí)伙伴

公眾號(hào)

掃描二維碼
關(guān)注慕課網(wǎng)微信公眾號(hào)