14

我在将大量数据写入 SQL Server 上的 FILESTREAM 列时遇到问题。具体来说,大约 1.5-2GB 的小文件可以很好地处理,但是当大小达到 6GB 及以上时,我会在传输结束时出现间歇性 IOException的“句柄无效” 。.CopyTo()

我曾考虑以块的形式写入数据,但 SQL Server 在允许将数据附加到该字段之前复制了该字段的支持文件,这完全破坏了大文件的性能。

这是代码:

public long AddFragment (string location , string description = null) 
{
    const string sql = 
        @"insert into [Fragment] ([Description],[Data]) " +
            "values (@description,0x); " +
         "select [Id], [Data].PathName(), " +
             "GET_FILESTREAM_TRANSACTION_CONTEXT() " +
         "from " +
             "[Fragment] " +
         "where " +
             "[Id] = SCOPE_IDENTITY();";

    long id;

    using (var scope = new TransactionScope(
        TransactionScopeOption.Required, 
            new TransactionOptions {
                Timeout = TimeSpan.FromDays(1)
            })) 
    {
        using (var connection = new SqlConnection(m_ConnectionString)) 
        {
            connection.Open();

            byte[] serverTx;
            string serverLocation;

            using (var command = new SqlCommand (sql, connection)) 
            {
                command.Parameters.Add("@description", 
                    SqlDbType.NVarChar).Value = description;

                using (var reader = command.ExecuteReader ()) 
                {
                    reader.Read();
                    id = reader.GetSqlInt64(0).Value;
                    serverLocation = reader.GetSqlString (1).Value;
                    serverTx = reader.GetSqlBinary (2).Value;
                }
            }

            using (var source = new FileStream(location, FileMode.Open, 
                FileAccess.Read, FileShare.Read, 4096, 
                FileOptions.SequentialScan))
            using (var target = new SqlFileStream(serverLocation, 
                serverTx, FileAccess.Write))
            {
                source.CopyTo ( target );
            }
        }

        scope.Complete();
    }

    return id;
}
4

2 回答 2

4

我建议您在FileStream类周围使用BufferedStream类。

还要确保在SqlFileStream类上设置WriteTimeOut属性。

在这里,您可以找到一篇非常好的文章,解释了有关 SqlFileStream 的所有内容http://www.simple-talk.com/sql/learn-sql-server/an-introduction-to-sql-server-filestream/

于 2012-10-09T23:04:28.210 回答
2

正如一些评论所建议的,问题可能是事务超时。您可以通过运行 SQL Server Profiler 并观察要回滚的事务来验证这一点。

除非另有说明,否则 machine.config 的默认 maxTimeout 为 10 分钟,不能通过代码覆盖。要增加最大超时,请将以下内容添加到 machine.config 的配置设置中

<system.transactions>
  <machineSettings maxTimeout="00:30:00" />
</system.transactions>
于 2014-03-31T12:43:48.343 回答