36

很长一段时间以来,我注意到我的服务器应用程序的 Win64 版本泄漏内存。虽然 Win32 版本在内存占用相对稳定的情况下运行良好,但 64 位版本使用的内存定期增加 - 可能 20Mb/天,没有任何明显的原因(不用说,FastMM4 没有报告任何内存泄漏) . 32 位和 64 位版本的源代码相同。该应用程序是围绕 Indy TIdTCPServer 组件构建的,它是一个高度多线程的服务器,连接到数据库,用于处理由 Delphi XE2 制作的其他客户端发送的命令。

我花了很多时间检查自己的代码并试图理解为什么 64 位版本会泄漏这么多内存。我最终使用了旨在跟踪内存泄漏的 MS 工具,如 DebugDiag 和 XPerf,似乎 Delphi 64 位 RTL 中存在一个基本缺陷,每次线程与 DLL 分离时都会导致一些字节泄漏。对于必须 24/7 不间断运行且无需重新启动的高度多线程应用程序,此问题尤为重要。

我用一个非常基本的项目重现了这个问题,该项目由一个主机应用程序和一个库组成,两者都是用 XE2 构建的。DLL 与主机应用程序静态链接。宿主应用程序创建只调用虚拟导出过程并退出的线程:

这是该库的源代码:

library FooBarDLL;

uses
  Windows,
  System.SysUtils,
  System.Classes;

{$R *.res}

function FooBarProc(): Boolean; stdcall;
begin
  Result := True; //Do nothing.
end;

exports
  FooBarProc;

宿主应用程序使用一个计时器来创建一个只调用导出过程的线程:

  TFooThread = class (TThread)
  protected
    procedure Execute; override;
  public
    constructor Create;
  end;

...

function FooBarProc(): Boolean; stdcall; external 'FooBarDll.dll';

implementation

{$R *.dfm}

procedure THostAppForm.TimerTimer(Sender: TObject);
begin
  with TFooThread.Create() do
    Start;
end;

{ TFooThread }

constructor TFooThread.Create;
begin
  inherited Create(True);
  FreeOnTerminate := True;
end;

procedure TFooThread.Execute;
begin
  /// Call the exported procedure.
  FooBarProc();
end;

这是一些使用 VMMap 显示泄漏的屏幕截图(查看名为“Heap”的红线)。以下屏幕截图是在 30 分钟间隔内拍摄的。

32位二进制显示增加了16个字节,这是完全可以接受的:

32 位版本的内存使用情况

64位二进制显示增加了12476字节(从820K到13296K),问题比较多:

64 位版本的内存使用情况

堆内存的不断增加也被 XPerf 证实:

XPerf 用法

使用 DebugDiag 我能够看到分配泄漏内存的代码路径:

LeakTrack+13529
<my dll>!Sysinit::AllocTlsBuffer+13
<my dll>!Sysinit::InitThreadTLS+2b
<my dll>!Sysinit::::GetTls+22
<my dll>!System::AllocateRaiseFrame+e
<my dll>!System::DelphiExceptionHandler+342
ntdll!RtlpExecuteHandlerForException+d
ntdll!RtlDispatchException+45a
ntdll!KiUserExceptionDispatch+2e
KERNELBASE!RaiseException+39
<my dll>!System::::RaiseAtExcept+106
<my dll>!System::::RaiseExcept+1c
<my dll>!System::ExitDll+3e
<my dll>!System::::Halt0+54
<my dll>!System::::StartLib+123
<my dll>!Sysinit::::InitLib+92
<my dll>!Smart::initialization+38
ntdll!LdrShutdownThread+155
ntdll!RtlExitUserThread+38
<my application>!System::EndThread+20
<my application>!System::Classes::ThreadProc+9a
<my application>!SystemThreadWrapper+36
kernel32!BaseThreadInitThunk+d
ntdll!RtlUserThreadStart+1d

Remy Lebeau在 Embarcadero 论坛上帮助我了解正在发生的事情:

第二次泄漏看起来更像是一个明确的错误。在线程关闭期间,正在调用 StartLib(),它调用 ExitThreadTLS() 以释放调用线程的 TLS 内存块,然后调用 Halt0() 以调用 ExitDll() 以引发由 DelphiExceptionHandler() 捕获的异常以调用 AllocateRaiseFrame( ),它在访问名为 ExceptionObjectCount 的 threadvar 变量时间接调用 GetTls() 和 InitThreadTLS()。这将重新分配仍在关闭过程中的调用线程的 TLS 内存块。因此,StartLib() 不应该在 DLL_THREAD_DETACH 期间调用 Halt0(),或者 DelphiExceptionHandler 在检测到引发 _TExitDllException 时不应该调用 AllocateRaiseFrame()。

对我来说似乎很清楚,Win64 处理线程关闭的方式存在一个重大缺陷。这种行为禁止开发任何必须在 Win64 下 27/7 运行的多线程服务器应用程序。

所以:

  1. 你觉得我的结论怎么样?
  2. 你们有没有解决这个问题的方法?

质检报告 105559

4

3 回答 3

2

一个非常简单的解决方法是重用线程而不是创建和销毁它们。线程非常昂贵,您也可能会获得性能提升......不过调试的荣誉......

于 2012-05-13T01:45:25.870 回答
0

为了避免异常内存泄漏陷阱,您可以尝试在 FoobarProc 周围放置一个 try/except。也许不是为了一个明确的解决方案,而是为了看看为什么首先提出了这个问题。

我通常有这样的事情:

try
  FooBarProc()
except
  if IsFatalException(ExceptObject) then // checks for system exceptions like AV, invalidop etc
    OutputDebugstring(PChar(ExceptionToString(ExceptObject))) // or some other way of logging
end;
于 2018-06-07T14:53:29.983 回答
0

我使用的是Delphi 10.2.3,所描述的问题似乎仍然存在,至少在以下情况下。

// Remark: My TFooThread is created within the 64 Bit DLL:

procedure TFooThread.Execute;
begin
 while not terminated do
  try
   ReadBlockingFromIndySocket();
   ProcessData();
  except on E:Exception do
   begin
    LogTheException(E.Message);
    // Leave loop and thread
    Abort;
   end
  end;
end;

每当离开循环/线程时,这都会泄漏内存。MadExcept 泄漏报告显示异常对象没有被破坏,在我的情况下,当远程关闭连接时主要是 EIdConnClosedGracefully。问题被发现是 Abort 语句离开循环和线程。泄漏报告中的迹象似乎证明了@RemyLebeau 的观察。在主程序而不是 64 位 DLL 中运行完全相同的代码不会泄漏任何内存。

解决方案:将 Abort 语句与 Exit 交换。

结论:64位DLL中的线程执行函数不能有异常(Abort也是异常),否则异常会导致内存泄漏。

至少这对我有用。

于 2019-12-16T04:15:04.177 回答