最小的开销分布式事件记录库/框架？

我们想保留系统中所有重大事件的记录.例如,在数据库可能存储当前用户状态的情况下,事件日志应记录对该状态的所有更改以及更改发生的时间.

事件日志记录工具应该尽可能接近零开销,应该容纳结构化信息(而不是文本日志消息),并且应该支持分布式部署(许多框抛出许多事件).

在过去的生活中,我们有一个基于UDP的系统运行良好,因为我们可以很好地控制系统(最小化数据包丢失).偶数投掷者将触发将被捕获并记录在其他盒子上的UDP数据包.我正在寻找类似的,希望开源的,现成的,并可在更一般的网络中部署.或者,我愿意接受有关如何构建此类内容的建议.

这应该适用于多种语言,但主要针对Java和Python.参与(投掷事件)申请会有所不同; 有些将是网络应用程序,其他将是面向批量的应用 结果可能会存在于Hadoop/HDFS/HBase中.