12

由于这个错误，我已经阅读和测试并将我的头撞到墙上超过一天。

我在一个名为的类中有一些 Java 代码Listener，看起来像这样

ExecutorService executor = Executors.newFixedThreadPool(NTHREADS);
boolean listening = true;
int count = 0;
while (listening) {
    Runnable worker;
    try {
        worker = new ServerThread(serverSocket.accept()); // this is line 254
        executor.execute(worker);
        count++;
        logger.info("{} threads started", count);
    } catch (Exception e1){
        //...
    }
}

我一直在调整 JVM 设置-Xmx（从 1 到 15G）和-Xss（从 104k 到 512M）。服务器有 24 GB 的 RAM，但还必须运行支持该程序的数据库。

创建 2-20 个线程后（程序中其他地方也存在几十个线程），我收到错误

Exception in thread "Thread-0" java.lang.OutOfMemoryError: unable to create new native thread
at java.lang.Thread.start0(Native Method)
at java.lang.Thread.start(Thread.java:657)
at java.util.concurrent.ThreadPoolExecutor.addWorker(ThreadPoolExecutor.java:943)
at java.util.concurrent.ThreadPoolExecutor.execute(ThreadPoolExecutor.java:1325)
at xxx.Listener.run(Listener.java:254)

$java -version产量：

java version "1.6.0_24"
OpenJDK Runtime Environment (IcedTea6 1.11.1) (fedora-65.1.11.1.fc16-x86_64)
OpenJDK 64-Bit Server VM (build 20.0-b12, mixed mode)

发生这种情况时，系统上总是有大量可用内存，其他程序继续正常执行。是什么导致 Java 认为它没有更多内存可用于新线程？

更新： 也许这比我想象的要大 - 我在使用时设法得到这个错误（只有一次）^C：

OpenJDK 64-Bit Server VM warning: Exception java.lang.OutOfMemoryError occurred dispatching signal SIGINT to handler- the VM may need to be forcibly terminated

当我试图杀死客户端时也发生了同样的情况（也是用Java编写并在同一台服务器上运行，它是一个读取文件并通过套接字将其发送到服务器的单线程），所以肯定有一个超出的限制JVM 导致一个干扰另一个，但我无法想象如果我仍然有空闲内存并且根本不使用交换会怎样？服务器 -Xmx1G -Xss104k 客户端 -Xmx10M

UPDATE2： 放弃 perlForks::Super库并从 bash 运行客户端让我在服务器因 OOME 崩溃之前获得多达 34 个线程，因此运行多个客户端肯定会对服务器产生影响，但同时我应该仍然能够运行一次超过 34 个（如果算上客户端，则为 68 个）java 线程。哪些系统资源阻止了更多线程的创建（即我应该在哪里寻找猪）？当一切（客户端、服务器、GC ...）同时耗尽内存时，top说明我的 CPU 和内存使用情况：

Cpu(s):  0.0%us,  0.0%sy,  0.0%ni,100.0%id,  0.0%wa,  0.0%hi,  0.0%si,  0.0%st
Mem:  24681040k total,  1029420k used, 23651620k free,    30648k buffers
Swap: 26836988k total,        0k used, 26836988k free,   453620k cached

UPDATE3：下面的 hs_error 日志是否表明我的 java 不是 64 位的？

# There is insufficient memory for the Java Runtime Environment to continue.
# Cannot create GC thread. Out of system resources.
# Possible reasons:
#   The system is out of physical RAM or swap space
#   In 32 bit mode, the process size limit was hit
# Possible solutions:
#   Reduce memory load on the system
#   Increase physical memory or swap space
#   Check if swap backing store is full
#   Use 64 bit Java on a 64 bit OS
#   Decrease Java heap size (-Xmx/-Xms)
#   Decrease number of Java threads
#   Decrease Java thread stack sizes (-Xss)
#   Set larger code cache with -XX:ReservedCodeCacheSize=
# This output file may be truncated or incomplete.
#
# JRE version: 6.0_24-b24
# Java VM: OpenJDK 64-Bit Server VM (20.0-b12 mixed mode linux-amd64 compressed oops)
# Derivative: IcedTea6 1.11.1
# Distribution: Fedora release 16 (Verne), package fedora-65.1.11.1.fc16-x86_64
4

4 回答 4

11

您可以通过限制max user processes，了解您的限制使用：

ulimit -u

要更改限制：

在/etc/security/limits.conf集合中：

user soft nproc [your_val] 
user hard nproc [your_val]

如果还不够，您可能需要添加一些其他配置，请参阅此链接。

注意： OP 在 fedora 和 centos 中发现了这个错误报告，它解释了编辑的限制/etc/security/limits.conf。

于 2012-05-27T21:01:37.877 回答
3

您的问题可能与 JVM 无法为新线程分配堆栈内存有关。具有讽刺意味的是，这个问题可以通过减少堆空间（-Xmx）和堆栈空间（-Xss）来解决。例如，在这里查看一个很好的解释： http: //www.blogsoncloud.com/jsp/techSols/java-lang-OutOfMemoryError-unable-to-create-new-native-thread.jsp

于 2012-05-24T18:02:13.663 回答
3

它不是缺少新线程的内存，而是缺少实际线程。系统可能会阻止您：用户可以创建的线程数量是有限的。你可以这样查询：

cat /proc/sys/kernel/threads-max

请注意，您可能会受到同一台机器上的其他进程的影响，它们也创建了许多线程。您可能会发现这个问题很有用： Linux 中每个进程的最大线程数？

于 2012-05-24T18:02:46.040 回答
1

只是为了澄清：

您ServerSocket向Thread. 您是否将数据发送到该套接字？也许您在 Thread-Context 中存储了大量数据。查看一个模式，您将 Streamdata 存储在byte[].

于 2012-05-25T19:53:54.780 回答