多易 億級在線實(shí)時(shí)動態(tài)規(guī)則運(yùn)營系統(tǒng)(V2架構(gòu))
QPS估算
二八法則:一天24小時(shí),凌晨12點(diǎn)到凌晨8點(diǎn)這8個小時(shí)幾乎是沒有數(shù)據(jù)。根據(jù)二八法則80%的數(shù)據(jù)會在白天8點(diǎn)和晚上12點(diǎn)之前16個小時(shí)產(chǎn)生,1億80=8千萬 ,也就是8千萬的數(shù)據(jù)會在16個小時(shí)產(chǎn)生,而且8千萬數(shù)據(jù)的80%(6400萬)會在16個小時(shí)的20%時(shí)間(3小時(shí))涌入。
QPS計(jì)算公式=6400萬/(360*60)=6000,故高峰期kafka集群要抗住每秒6千的并發(fā)
高峰期QPS控制在集群能承載的總QPS的1/3,所以kafka集群承載的總QPS應(yīng)該是6千*3=1萬8的并發(fā)
標(biāo)簽: