有人成功使用什么设计在 Windows Azure 上实现作业处理?
要求:
- 能够将作业推送到队列中。
- N 个 worker 可以从队列中消费 Job 并处理它们。
- 作业的调用者应该能够被提醒(推送,而不是轮询)作业正在完成。
迄今为止的研究:
- 使用Azure 服务总线队列( http://blogs.msdn.com/b/appfabric/archive/2011/05/17/an-introduction-to-service-bus-queues.aspx )创建一个“作业”队列
- Web 前端将作业推送到队列中,工作人员在 Receive() 上无限期地阻塞(请参阅http://msdn.microsoft.com/en-us/library/microsoft.servicebus.messaging.brokeredmessage.aspx),直到作业准备好(避免“空”长轮询,由于 API 调用交易成本,这需要花钱)
关于收到作业完成通知:
- 作业完成时没有明显的提醒能力。我想我可以利用服务总线主题/订阅(https://www.windowsazure.com/en-us/develop/net/how-to-guides/service-bus-topics/)并让调用者“订阅”但是,“作业完成通知”主题:
- 您显然不能多次订阅同一个主题,除非您创建多个“订阅”条目(不可扩展)
- 除非我们确实为每个 Job Id 创建了一个“订阅”,并且在该订阅上的 Receive() API 调用(使用 I/O 完成端口)上有调用者阻塞,否则我们无法获得关于 Job 何时具有的实时通知被处理。
以前有没有人有过实现这种工作系统(实时、低延迟、为调用者提供完成通知)的经验?
谢谢