我正在开发一个维基百科机器人来分析编辑贡献。不幸的是,完成一次运行需要数小时,在此期间,维基百科的数据库复制延迟(在运行期间的某个时间点)肯定会超过 5 秒(默认的 maxlag 值)。API 的 maxlag 参数中的建议是检测滞后错误,暂停 X 秒并重试。
但我所做的只是阅读以下内容:
usrpg = pywikibot.Page(site, 'User:' + username)
usr = pywikibot.User(usrpg)
for contrib in usr.contributions(total=max_per_user_contribs):
# (analyzes contrib here)
如何检测错误并恢复它?这是错误:
WARNING: API error maxlag: Waiting for 10.64.32.21: 7.1454429626465 seconds lagged
Traceback (most recent call last):
File ".../bot/core/pwb.py", line 256, in <module>
if not main():
File ".../bot/core/pwb.py", line 250, in main
run_python_file(filename, [filename] + args, argvu, file_package)
File ".../bot/core/pwb.py", line 121, in run_python_file
main_mod.__dict__)
File "analyze_activity.py", line 230, in <module>
attrs = usr.getprops()
File ".../bot/core/pywikibot/page.py", line 2913, in getprops
self._userprops = list(self.site.users([self.username, ]))[0]
File ".../bot/core/pywikibot/data/api.py", line 2739, in __iter__
self.data = self.request.submit()
File ".../bot/core/pywikibot/data/api.py", line 2183, in submit
raise APIError(**result['error'])
pywikibot.data.api.APIError: maxlag: Waiting for 10.64.32.21:
7.1454 seconds lagged [help:See https://en.wikipedia.org/w/api.php for API usage]
<class 'pywikibot.data.api.APIError'>
CRITICAL: Closing network session.
我突然发现该行代码中抛出的异常:
raise APIError(**result['error'])
但是随后为用户重新启动贡献似乎非常低效。一些用户有 400,000 次编辑,所以从头开始重新运行是很多倒退。
我已经搜索了这样做的示例(检测错误并重试),但我发现没有任何用处。