我们已经使用 CNTK 训练了一个模型。我们正在构建一个服务,该服务将加载此模型并响应对句子进行分类的请求。关于性能,最好的 API 是什么?我们更愿意在https://github.com/Microsoft/CNTK/tree/master/Examples/Evaluation/CSEvalClient中构建一个 C# 服务,但或者我们正在考虑构建一个将在 python 中加载模型的 Python 服务。
您对其中一种方法有什么建议吗?(关于哪个 API 更快、更积极地维护或您能想到的其他参数)。下一步是建立一个测量两个 API 调用性能的实验,但想知道这里是否有一些先验知识可以帮助我们做出决定。
谢谢