python - 将异步 urlfetch 与 urllib2 与谷歌应用引擎中的线程进行比较

Question

我必须让suds异步运行，我在想两个想法：

1. （更容易）在单独​​的线程中运行每个 suds 调用，因为 GAE python 2.7 运行时允许它。

2. （更难）重写 suds lib 以在异步 url 获取之上运行

我想使用第一个选项，但不知道它是否会比第二个慢得多。

也许在 GAE 方面更有经验的人可以帮助我选择？

更新

结果必须在单个 Web 请求中，所以我不能使用任务队列/mapreduce/后端

Answer 1

根据这个问题，suds 不是线程安全库。因此，您必须为每个想要使用 suds 客户端对象的线程创建一个新客户端。话虽如此，选择 1 将是您的最佳选择。

此外，请在此处查找有关如何使 suds 库与 GAE 上的缓存一起使用的信息。

更新

其他可以尝试的技术（对于您不需要单个 Web 请求中的结果的用例）：

后端和拉队列：（如果您打算不断拨打电话，请使用此方法）

创建始终在线的后端，将 suds 客户端存储在内存中，并不断轮询拉取队列以查找您需要执行的任务。这样，您可以推送应用程序需要执行的许多任务/调用，并让多个后端以小块的形式消耗数据。

任务队列：

（如果您想尝试将成本保持在最低限度并且不打算持续进行多次 SOAP 调用，请使用此方法）

创建任务并让 AppEngine 跨多个实例执行您的需求。只知道无法保证任务何时执行，但根据我的经验，这不是问题。