问重异步处理

EN

我有一个应用程序，它以最简单的形式从数据库读取大量电话号码(约1500万)，并将每个号码一次一行地发送到url进行处理。我设计的应用程序如下：

1. 使用SSIS将电话号码从
2. 大容量导出到文本文件。
3. 将这些数字加载到消息队列中(我目前使用MSMQ )。
4. 将命令行应用程序中的消息排出队列，并通过http将请求发送到某些服务，比如每个电话号码3次，最后登录到数据库。

问题是:它仍然需要很长时间才能完成。MSMQ对它可以接收的消息的大小也有限制，现在我必须创建多个消息队列。我需要大量的容错能力，但由于性能原因，我不敢让消息队列具有事务性。我正在考虑将消息队列(目前是一个私有队列)发布到active目录中，以便进程能够从不同的系统中将它排出队列，这样就可以更快地完成任务。而且，我的处理器在执行过程中达到了100%，此时我正在将它更改为使用线程池。如果JMS能更好地处理队列，我现在就愿意研究它。到目前为止，整个处理中最有效的部分是SSIS部分。

我希望听到更好的设计方法，特别是如果您以前处理过此类卷的话。如果它能更好地处理这种情况，我准备切换到unix或lisp。

谢谢。