摘要：日志對于每個系統來說都是不可或缺的一部分,而現階段對日志的處理效率卻不盡如人意。實時性日志考驗的是大數據處理框架的實時計算能力,基于Storm并借助開源框架Kafka,設計了一個實時數據收集與處理的系統,將數據轉為流的形式,對收集來的數據直接在內存以流的形式進行計算,輸出有價值的信息保存到Redis。最后對系統進行性能測試以及計算能力的測試。實驗結果表明,該系統可擴展性良好,且并行計算能力穩定,適合大量實時數據處理。