Storm 与 Esper

将storm做更高层次的抽象就没有办法绕开数据的元数据。Storm本身只提供到fields级别的,而且发送单位只能是List<Object>,nathan在这方面虽有意向,但没有说明开发计划。

基于事件流分析的Esper有较为丰富的上层接口,其类SQL语言对数据开发人员也比较友好。在Github上也有人做过此类的尝试,https://github.com/tomdz/storm-esper ,可能由于作者只是一时兴起,并没有做完善的开发,在元数据方面也仅仅以Object类型代之,使得Esper中利用持久层数据库做过滤、查询等操作就形同鸡肋。

于是自己写了一个Storm的Esper接口,思想还是借鉴于tomdz的将Esper置于Bolt中,增加了元数据的支持并进行了更高层次的抽象。对于使用HBase的操作进行了二次事件发送,使得其暂时可以支持HBase作为持久层。

 

你可能感兴趣的:(storm)