storm+kafka

redis 缓存预热

服务器启动后迅速宕机原因：请求数量较高主从之间数据吞吐量较大，数据同步操作频度较高解决方案：前置准备工作日常例行统计数据访问记录，统计访问频度较高的热点数据利用LRU数据删除策略，构建数据留存队列（例如：storm
QunKrys·2023-03-31 00:25

【填坑之旅-hadoop】centos7安装hadoop2.10.1 hive 1.2.2 / hdfs 文件上传写入流程 / MapReduce Yarn 流程/zookeeper/hive

的原理和使用操作、编程第三天mapreduce的原理和编程第四天常见mr算法实现和shuffle的机制第五天hadoop2.x中HA机制的原理和全分布式集群安装部署及维护第六天hbasehive第七天storm
alwarse·2021-10-22 11:24

storm笔记：Storm+Kafka简单应用

storm笔记：Storm+Kafka简单应用这几天工作需要使用storm+kafka，基本场景是应用出现错误，发送日志到kafka的某个topic，storm订阅该topic，然后进行后续处理。
看山·2020-09-11 19:21

storm+kafka测试案例

BaseBasicBolt创建topology使用TopologyBuildercreateTopology()创建启动topology使用LocalClustersubmitTopology发布二.本地storm
任小辉·2020-09-11 03:44

Springboot自定义Kafka序列化与Flink自定义kafka反序列化

Springboot自定义kafka序列化与Flink自定义kafka反序列化在实时计算的场景下，我们大多数会采用Storm+Kafka、Spark+Kafka和Flink+Kafka的组合形式来完成。
wFitting·2020-08-23 09:01

43. 缓存冷启动问题解决方案：基于storm实时热点统计的分布式并行缓存预热

目录前言缓存冷启动缓存预热开发方案访问流量上报实时统计流量访问次数数据恢复实战项目nginx+lua实现实时上报kafka基于storm+kafka完成商品访问次数实时统计拓扑的开发基于storm完成LRUMap
咸鱼翻面·2020-08-04 16:10

【八】storm+kafka整合

官网参考0.8.X的kafkamaven的pom文件4.0.0com.sid.bigdatastorm0.0.1jarstormhttp://maven.apache.orgUTF-81.1.12.6.0org.apache.stormstorm-core${storm.version}org.slf4jlog4j-over-slf4jcommons-iocommons-io2.4org.apac
jy02268879·2020-07-11 09:17

Storm 入门（四）—— Storm+Kafka的实时计算实践

本章将简单介绍关于Storm+Kafka的进行一个简单的实践，进行单词累计计算。
舒凡devp·2019-12-16 01:09

Spring boot集成Kafka+Storm的示例代码

前言由于业务需求需要把Strom与kafka整合到springboot项目里,实现其他服务输出日志至kafka订阅话题,storm实时处理该话题完成数据监控及其他数据统计,但是网上教程较少,今天想写的就是如何整合storm
LeeZer·2017-12-31 10:33

Spring boot 集成 kafka及storm

转载请注明作者及出处前言由于业务需求需要把Strom与kafka整合到springboot项目里,实现其他服务输出日志至kafka订阅话题,storm实时处理该话题完成数据监控及其他数据统计,但是网上教程较少,今天想写的就是如何整合storm
LeeZerrr·2017-12-30 17:55

携程实时大数据平台演进

携程最初基于稳定和成熟度选择了Storm+Kafka，解决了数据共享、资源控制、监控告警、依赖管理等问题之后基本上覆盖了携程所有的技术团队。
fyxxq·2017-04-26 14:51

storm笔记：Storm+Kafka简单应用

这几天工作需要使用storm+kafka，基本场景是应用出现错误，发送日志到kafka的某个topic，storm订阅该topic，然后进行后续处理。
看山灬·2017-04-01 15:53

携程实时大数据平台演进：1/3 Storm应用已迁到JStorm

携程最初基于稳定和成熟度选择了Storm+Kafka，解决了数据共享、资源控制、监控告警、依赖管理等问题之后基本上覆盖了携程所有的技术团队。
周建丁·2016-08-17 06:47

storm+kafka：WordCount程序

简单的输入输出做完了，来点复杂点儿的场景：从某个topic定于消息，然后根据空格分词，统计单词数量，然后将当前输入的单词数量推送到另一个topic。首先规划需要用到的类：从KafkaSpout接收数据并进行处理的backtype.storm.spout.Scheme子类；数据切分bolt：SplitSentenceBolt；计数bolt：WordCountBolt；报表bolt：ReportBol
choulanlan·2016-06-23 17:21

storm+kafka集成简单应用

这两天公司要学习kafka，结合之前的storm，做了一个简单的集成，之前也参考了网上的例子一些例子，发现或多或少都有一些问题。所以自己做了一个。这个是网上其他人遇到的问题，给摘录一下，防止以后自己和大家出现：基本场景是应用出现错误，发送日志到kafka的某个topic，storm订阅该topic，然后进行后续处理。场景非常简单，但是在学习过程中，遇到一个奇怪的异常情况：使用KafkaSpout读
choulanlan·2016-06-23 17:14

storm笔记：Storm+Kafka简单应用

storm笔记：Storm+Kafka简单应用这几天工作需要使用storm+kafka，基本场景是应用出现错误，发送日志到kafka的某个topic，storm订阅该topic，然后进行后续处理。
看山·2016-01-21 09:29

[置顶] storm笔记：Storm+Kafka简单应用

storm笔记：Storm+Kafka简单应用这几天工作需要使用storm+kafka，基本场景是应用出现错误，发送日志到kafka的某个topic，storm订阅该topic，然后进行后续处理。
conansix·2016-01-21 09:00
上一页 1 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他