0

我有一个 solr 网站，其中包含大约 500 个文档（架构中定义了 30 个文件），以及在同一台机器上的ac# 客户端，它将向该 solr 网站发送 http get 请求。这些日志是由我的 c# 客户端记录的：

01-16 23:54:49,301 [107] INFO LogHelper - requst time too long: 1054, solr time: 1003
01-16 23:54:49,847 [63] INFO LogHelper - requst time too long: 1068, solr time: 1021
01-16 23:57:17,813 [108] INFO LogHelper - requst time too long: 1051, solr time: 1027
01-16 23:57:18,313 [111] INFO LogHelper - requst time too long: 1031, solr time: 1007
and so on…

您可以看到，来自 solr 的查询时间非常长，而且每次都相似（在 1000 毫秒到 1050 毫秒之间）。同时在tomcat中对应的日志：

2013-1-16 23:54:49 org.apache.solr.core.SolrCore execute
Info: [suit1] webapp=/vanclsearchV2 path=/select/ params={fl=id,typeid,createtime,vprice,sprice,price,totalassesscount,totalsalescount,productcode,productname,stylecode,tag,vpricesku,spricesku,pricesku,userrate,assesscount,lstphotos,mainphotos,salesflag,isduanma,detailsalescount,productplusstyleinfo&sort=createtime+desc&start=0&q=*:*&wt=json&fq=ancestorsid:(28976+OR+28978)&fq=typeid:(1)&rows=30} hits=43 status=0 QTime=0 
2013-1-16 23:54:49 org.apache.solr.core.SolrCore execute
Info: [suit1] webapp=/vanclsearchV2 path=/select/ params={fl=id,typeid,createtime,vprice,sprice,price,totalassesscount,totalsalescount,productcode,productname,stylecode,tag,vpricesku,spricesku,pricesku,userrate,assesscount,lstphotos,mainphotos,salesflag,isduanma,detailsalescount,productplusstyleinfo&sort=createtime+desc&start=0&q=*:*&wt=json&fq=ancestorsid:(28976+OR+28978)&fq=typeid:(1)&rows=30} hits=43 status=0 QTime=0
2013-1-16 23:57:17 org.apache.solr.core.SolrCore execute
Info: [suit1] webapp=/vanclsearchV2 path=/select/ params={fl=id,typeid,createtime,vprice,sprice,price,totalassesscount,totalsalescount,productcode,productname,stylecode,tag,vpricesku,spricesku,pricesku,userrate,assesscount,lstphotos,mainphotos,salesflag,isduanma,detailsalescount,productplusstyleinfo&sort=createtime+desc&start=0&q=*:*&wt=json&fq=ancestorsid:(27547+OR+27614)&rows=30} hits=9 status=0 QTime=0 
2013-1-16 23:57:18 org.apache.solr.core.SolrCore execute
Info: [suit1] webapp=/vanclsearchV2 path=/select/ params={fl=id,typeid,createtime,vprice,sprice,price,totalassesscount,totalsalescount,productcode,productname,stylecode,tag,vpricesku,spricesku,pricesku,userrate,assesscount,lstphotos,mainphotos,salesflag,isduanma,detailsalescount,productplusstyleinfo&sort=createtime+desc&start=0&q=*:*&wt=json&fq=ancestorsid:(27547+OR+27614)&rows=30} hits=9 status=0 QTime=0

每一次奇怪，所有的 QTime 都为零！谁能解释这种情况，以及如何解决这个问题？

string QUERY_TEMPLATE = ConfigurationManager.AppSettings["solr-select-url"] + "/select/?fl={0}&q={1}{2}&start={3}&rows={4}&sort={5}&wt=json";

WebRequest request = HttpWebRequest.Create(string.Format(QUERY_TEMPLATE,
                                                requestInfo.BrowserType==BrowserTypeEnum.Style?STYLE_FIELDS:COLOR_FIELDS,
                                                string.IsNullOrWhiteSpace(requestInfo.KeyWord) ? "*:*" : requestInfo.KeyWord,
                                                filterQuery,
                                                (requestInfo.Page - 1) * requestInfo.RowsCount,
                                                requestInfo.RowsCount,
                                                sortFiled)
                                            );
request.Method="GET";

string resultString=null;

Stopwatch solrWatch = new Stopwatch();
solrWatch.Start();
using (WebResponse response = request.GetResponse())
{
    using (Stream stream = response.GetResponseStream())
    {
        using (StreamReader reader = new StreamReader(stream))
        {
            resultString = reader.ReadToEnd();
        }
    }
}
solrWatch.Stop();
solrTime = solrWatch.ElapsedMilliseconds;
4

2 回答 2

2

QTime 是 Solr 进行搜索的时间。其余时间用于生成响应，包括从磁盘获取字段的存储内容并将它们生成为 JSON 格式。

我会研究以下几件事：

  • 使用SolrNet库访问 Solr 而不是自己进行查询和解析响应
  • 检查您是否正在发送调试信息并将其关闭；只需查看返回的 JSON 并在 solrconfig.xml 中进行配置
  • 检查您是否真的需要所有这些字段作为响应
  • 检查任何特定字段是否真的很大，以及您是否受到磁盘而不是 CPU 的瓶颈；如果是这样，您可以（在 Solr 4 中）将该字段声明为压缩存储 - 这可以加快从磁盘获取该字段的速度
于 2013-01-17T13:25:07.583 回答
0

感谢您添加用于访问 Solr 服务器的代码。从您的 tomcat 日志可以看出，对 Solr 的请求发生得非常快。（Solr 正在缓存查询，因此 QTime 为 0，如您所述）。您的 1000+ 毫秒时间不是 Solr 服务器响应您的时间。这段时间用于将 Solr 响应传输回您的客户端（在这种情况下很简单，因为它位于同一服务器上）并读取响应流。

此外，您可能需要考虑使用SolrNet客户端从 C# 访问 Solr。它为查询 Solr 提供了更丰富的接口，并将查询结果映射到 POCO 对象。

于 2013-01-17T13:16:58.880 回答