5

我有一个使用 boost IOStreams 和过滤流缓冲区用 Zlib 压缩的大数据文件:

boost::iostreams::array_source uncompressedArray( reinterpret_cast< const char* >( &uncompressedData[0] ), uncompressedData.size() );

boost::iostreams::filtering_streambuf< boost::iostreams::output > out;
out.push( *m_compressor );
out.push( boost::iostreams::char_back_inserter( compressedData ) );
boost::iostreams::copy( uncompressedArray, out );

为了加快速度,我正在使用以下内容初始化 zlib 库:

boost::iostreams::zlib_params params;
params.level = boost::iostreams__zlib::best_speed;
params.mem_level = 9;

m_compressor.reset( new boost::iostreams::zlib_compressor( params, 131072 ) );
m_decompressor.reset( new boost::iostreams::zlib_decompressor( params, 131072 ) );

我的解压器是这样的:

boost::iostreams::array_source compressedArray( reinterpret_cast< const char* >( &compressedData[0] ), compressedData.size() );

boost::iostreams::filtering_streambuf< boost::iostreams::input > m_in;
m_in.push( *m_decompressor );
m_in.push( compressedArray );       
boost::iostreams::copy( m_in, boost::iostreams::char_back_inserter( uncompressedData ) );

我的问题是有什么方法可以加快膨胀(解压缩)操作?现在,压缩占用了我大约 83% 的数据访问时间,我真的需要加快速度。任何建议将不胜感激。

4

2 回答 2

3

加快解压速度的唯一方法是使压缩后的数据更小,从而减少处理量。这意味着要花更多时间进行压缩,假设您不那么关心那一端的处理时间。所以你会选择最佳压缩。

于 2012-12-11T02:58:38.770 回答
1

至少在 Windows 上,我们使用 zlib C 接口测量了 20% 的改进。仔细分析后发现 boost::iostreams::filtering_streambuf 和 iostream 开销是主要区别。

于 2017-07-14T17:54:38.727 回答