4

我有一个包含大量数据(数百万行)的数据库,并且在白天更新大量数据,我有这个数据库的备份用于报告,因此获取数据报告不会影响主数据库的性能。

为了将备份数据库与主数据库同步,我编写了一个 Windows 服务,它查询主数据库并将新数据插入备份数据库......每次查询从主数据库获取 5000 行......

编辑:

查询如下:

const string cmdStr = "SELECT * FROM [RLCConvertor].[dbo].[RLCDiffHeader] WHERE ID >= @Start and ID <= @End";

这是代码:

using (var conn = new SqlConnection(_connectionString))
{
            conn.Open();
            var cmd = new SqlCommand(cmdStr, conn);               
            cmd.Parameters.AddWithValue("@Start", start);
            cmd.Parameters.AddWithValue("@End", end);

            SqlDataReader reader = cmd.ExecuteReader(CommandBehavior.SequentialAccess);

            while (reader.Read())
            {
                var rldDiffId = Convert.ToInt32(reader["ID"].ToString());
                var rlcDifHeader = new RLCDiffHeader
                {
                    Tech_head_Type = long.Parse(reader["Tech_head_Type"].ToString()),
                    ItemCode = long.Parse(reader["ItemCode"].ToString()),
                    SessionNumber = long.Parse(reader["SessionNumber"].ToString()),                        
                    MarketFeedCode = reader["MarketFeedCode"].ToString(),
                    MarketPlaceCode = reader["MarketPlaceCode"].ToString(),
                    FinancialMarketCode = reader["FinancialMarketCode"].ToString(),
                    CIDGrc = reader["CIDGrc"].ToString(),
                    InstrumentID = reader["InstrumentID"].ToString(),
                    CValMNE = reader["CValMNE"].ToString(),
                    DEven = reader["DEven"].ToString(),
                    HEven = reader["HEven"].ToString(),
                    MessageCodeType = reader["MessageCodeType"].ToString(),
                    SEQbyINSTandType = reader["SEQbyINSTandType"].ToString()                                            
                };
                newRLCDiffHeaders.Add(rldDiffId, rlcDifHeader);
            }
            conn.Close();
        }

但是当我启动服务时...主数据库的性能变差了...代码效率不高?有没有更好的办法?因为我搜索并发现这dataReader是最适合这种情况的......还是我应该使用DataTableand SqlDataAdapter

4

1 回答 1

1

您不能将此视为问题的正确答案或解决方案。由于评论很大,我正在为您提供解决方案。

您可以尝试使用Ad hoc查询的概念吗

使用它,您可以使用以下方式查询另一个数据库

SELECT a.*
FROM OPENROWSET('SQLNCLI', 'Server=Seattle1;Trusted_Connection=yes;',
     'SELECT GroupName, Name, DepartmentID
      FROM AdventureWorks2012.HumanResources.Department
      ORDER BY GroupName, Name') AS a;

阅读更多 http://technet.microsoft.com/en-us/library/ms187569.aspx http://technet.microsoft.com/en-us/library/ms190312.aspx

由于您使用的是服务,因此服务帐户肯定有权读取主数据库并插入报告数据库。我会建议你在你的报告数据库中有一个 SP,它可以访问主数据库OpenRowSet并插入它。

查询将与此类似。

Insert into tbl
SELECT a.*
    FROM OPENROWSET('SQLNCLI', 'Server=Seattle1;Trusted_Connection=yes;',
         'SELECT GroupName, Name, DepartmentID
          FROM AdventureWorks2012.HumanResources.Department
          ORDER BY GroupName, Name') AS a;

形成服务,您需要调用 SP。我们遇到了类似的问题,这是由 openrowset 完成的,我不知道这可以提供多大的性能影响。但我建议你做一个 POC 并分析它。再次请将此视为建议。

于 2013-10-22T07:20:18.030 回答