AWS之SQS消息队列使用经验

1、问:什么是可见性超时?

      可见性超时是一个时段,在这个时段内,Amazon SQS 会阻止其他处理组件接收和处理某条消息。有关更多信息,请参阅 Amazon SQS 开发人员指南中的可见性超时。

       这个特性,在工作当中,我们可以提高基于sqs消息服务的并发能力。比如有1000个sqs client在监听同一个消息队列,因为每个消息内容不一样,而且可见期间,只能被一个client拿走处理,这就成功避免了并发出现会重复处理的问题。同时在处理期间,其他client不可见,也就是无法处理这个消息(即使拿走消息的那个client并没有成功处理掉,并ack回来),这样多个client就像一群狼,在相互合作各自捕捉处理一些羊群。

2、问:Amazon SQS 如何允许多个读取者访问同一消息队列,而不会丢失消息或重复处理消息?

      每个 Amazon SQS 队列都具有可配置的可见性超时。当系统从队列中读取一条消息时,任何其他读取者在指定时间都看不到该消息。只要消息的处理时间短于可见性超时,则每条消息就都会得以处理并被删除。

如果处理消息的组件出现故障或不可用,那么可见性超时结束后,读取消息队列的任何组件就可以再次看到该消息。这可以让多个组件从同一消息队列中读取消息,并且每个组件负责处理不同的消息。

3、问:消息最长可见性超时时间是多少?

      Amazon SQS 消息的最长可见性超时时间为 12 小时。这个时长的设置,可以根据client的处理能力,以及我们认为的timeout时间来设置。

利用sqs的可见性,可以多起几个进程,并发处理任务。提高吞吐量。

 

你可能感兴趣的:(AWS系列)