Debian の 613 スレッド制限

Question 1

一度に 600 を超えるスレッドを作成する必要はありません。同時に実行できる便利な処理に対してのみスレッドが必要です。システムは一度に 600 を超える処理を便利に実行することはできません。より多くの作業を実行するために、より多くのスレッドは必要ありません。

いずれにせよ、スタックサイズの設定が間違っています。コードによって作成されていない初期スレッドスタックの制限サイズを設定しています。コードによって作成されるスレッドのスタックのサイズを設定する必要があります。

変化：

  printf("Creating threads ...\n");
  for (i = 0; i < MAX_THREADS && rc == 0; i++) {
    rc = pthread_create(&(thread[i]), NULL, (void *) &run, NULL);

（大まかに）

  printf("Creating threads ...\n");
  pthread_attr_t pa;
  pthread_attr_init(&pa);
  pthread_attr_setstacksize(&pa, 2*1024*1024);
  for (i = 0; i < MAX_THREADS && rc == 0; i++) {
    rc = pthread_create(&(thread[i]), &pa, (void *) &run, NULL);
  phtread_attr_destroy(&pa);

pthread_attr_getstacksizeまた、プラットフォームのデフォルトのスレッドスタックサイズを確認するために呼び出すこともできます。スレッドが割り当てられたスタックを超えると、プロセスが終了することに注意してください。

2MB のスタックでも、非常に危険ですが、600 スレッドのスタックだけで 1.2GB が必要になります。どのような作業であっても、スレッドは適切なツールではありません。

Answer

一度に 600 を超えるスレッドを作成する必要はありません。同時に実行できる便利な処理に対してのみスレッドが必要です。システムは一度に 600 を超える処理を便利に実行することはできません。より多くの作業を実行するために、より多くのスレッドは必要ありません。

いずれにせよ、スタックサイズの設定が間違っています。コードによって作成されていない初期スレッドスタックの制限サイズを設定しています。コードによって作成されるスレッドのスタックのサイズを設定する必要があります。

変化：

  printf("Creating threads ...\n");
  for (i = 0; i < MAX_THREADS && rc == 0; i++) {
    rc = pthread_create(&(thread[i]), NULL, (void *) &run, NULL);

（大まかに）

  printf("Creating threads ...\n");
  pthread_attr_t pa;
  pthread_attr_init(&pa);
  pthread_attr_setstacksize(&pa, 2*1024*1024);
  for (i = 0; i < MAX_THREADS && rc == 0; i++) {
    rc = pthread_create(&(thread[i]), &pa, (void *) &run, NULL);
  phtread_attr_destroy(&pa);

pthread_attr_getstacksizeまた、プラットフォームのデフォルトのスレッドスタックサイズを確認するために呼び出すこともできます。スレッドが割り当てられたスタックを超えると、プロセスが終了することに注意してください。

2MB のスタックでも、非常に危険ですが、600 スレッドのスタックだけで 1.2GB が必要になります。どのような作業であっても、スレッドは適切なツールではありません。

Question 2

これはスレッド制限とは関係ありません。エラーコード 12 はスレッド制限には適用されません。

$ perror 12
OS error code  12:  Cannot allocate memory

スタックが不足している場合は、RedHat のデフォルトの 8MB に設定すれば、より多くのスレッドを実行できる可能性があります。

これは、明示的なスタックサイズが 8MB に設定されたリンクされたものと同じです。これをコンパイルすると何が起こるかを確認してください。

/* compile with:   gcc -lpthread -o thread-limit thread-limit.c */
/* originally from: http://www.volano.com/linuxnotes.html */

#include <stdio.h>
#include <stdlib.h>
#include <unistd.h>
#include <pthread.h>
#include <sys/time.h>
#include <sys/resource.h>

#define MAX_THREADS 10000
int i;

void run(void) {
  char c;
  if (i < 10)
    printf("Address of c = %u KB\n", (unsigned int) &c / 1024);
  sleep(60 * 60);
}

int main(int argc, char *argv[]) {
  struct rlimit limits;
  limits.rlim_cur = 1024*1024*8;
  limits.rlim_max = 1024*1024*8;
  if (setrlimit(RLIMIT_STACK, &limits) == -1) {
    perror("Failed to set stack limit");
    exit(1);
  }
  int rc = 0;
  pthread_t thread[MAX_THREADS];
  printf("Creating threads ...\n");
  for (i = 0; i < MAX_THREADS && rc == 0; i++) {
    rc = pthread_create(&(thread[i]), NULL, (void *) &run, NULL);
    if (rc == 0) {
      pthread_detach(thread[i]);
      if ((i + 1) % 100 == 0)
    printf("%i threads so far ...\n", i + 1);
    }
    else
      printf("Failed with return code %i creating thread %i.\n",
         rc, i + 1);
  }
  exit(0);
}

Answer

これはスレッド制限とは関係ありません。エラーコード 12 はスレッド制限には適用されません。

$ perror 12
OS error code  12:  Cannot allocate memory

スタックが不足している場合は、RedHat のデフォルトの 8MB に設定すれば、より多くのスレッドを実行できる可能性があります。

これは、明示的なスタックサイズが 8MB に設定されたリンクされたものと同じです。これをコンパイルすると何が起こるかを確認してください。

/* compile with:   gcc -lpthread -o thread-limit thread-limit.c */
/* originally from: http://www.volano.com/linuxnotes.html */

#include <stdio.h>
#include <stdlib.h>
#include <unistd.h>
#include <pthread.h>
#include <sys/time.h>
#include <sys/resource.h>

#define MAX_THREADS 10000
int i;

void run(void) {
  char c;
  if (i < 10)
    printf("Address of c = %u KB\n", (unsigned int) &c / 1024);
  sleep(60 * 60);
}

int main(int argc, char *argv[]) {
  struct rlimit limits;
  limits.rlim_cur = 1024*1024*8;
  limits.rlim_max = 1024*1024*8;
  if (setrlimit(RLIMIT_STACK, &limits) == -1) {
    perror("Failed to set stack limit");
    exit(1);
  }
  int rc = 0;
  pthread_t thread[MAX_THREADS];
  printf("Creating threads ...\n");
  for (i = 0; i < MAX_THREADS && rc == 0; i++) {
    rc = pthread_create(&(thread[i]), NULL, (void *) &run, NULL);
    if (rc == 0) {
      pthread_detach(thread[i]);
      if ((i + 1) % 100 == 0)
    printf("%i threads so far ...\n", i + 1);
    }
    else
      printf("Failed with return code %i creating thread %i.\n",
         rc, i + 1);
  }
  exit(0);
}

Question 3

次の情報を受け取りました: これはホストプロバイダーによって課せられた制限です。これはプログラミングや Linux とは何の関係もありません。

Answer

次の情報を受け取りました: これはホストプロバイダーによって課せられた制限です。これはプログラミングや Linux とは何の関係もありません。

Debian の 613 スレッド制限

答え1

答え2

答え3

関連情報