nsz Git - musl/blob - src/thread/pthread_create.c

   1 #include "pthread_impl.h"
   2
   3 static void dummy_0()
   4 {
   5 }
   6 weak_alias(dummy_0, __rsyscall_lock);
   7 weak_alias(dummy_0, __rsyscall_unlock);
   8
   9 static void dummy_1(pthread_t self)
  10 {
  11 }
  12 weak_alias(dummy_1, __pthread_tsd_run_dtors);
  13
  14 #ifdef __pthread_unwind_next
  15 #undef __pthread_unwind_next
  16 #define __pthread_unwind_next __pthread_unwind_next_3
  17 #endif
  18
  19 void __pthread_unwind_next(struct __ptcb *cb)
  20 {
  21         pthread_t self;
  22         int n;
  23
  24         if (cb->__next) longjmp((void *)cb->__next->__jb, 1);
  25
  26         self = pthread_self();
  27
  28         LOCK(&self->exitlock);
  29
  30         __pthread_tsd_run_dtors(self);
  31
  32         /* Mark this thread dead before decrementing count */
  33         self->dead = 1;
  34
  35         do n = libc.threads_minus_1;
  36         while (n && a_cas(&libc.threads_minus_1, n, n-1)!=n);
  37         if (!n) exit(0);
  38
  39         if (self->detached && self->map_base) {
  40                 __syscall(SYS_rt_sigprocmask, SIG_BLOCK, (long)(uint64_t[1]){-1},0,8);
  41                 __unmapself(self->map_base, self->map_size);
  42         }
  43
  44         __syscall(SYS_exit, 0);
  45 }
  46
  47 static int start(void *p)
  48 {
  49         struct pthread *self = p;
  50         if (self->unblock_cancel) {
  51                 sigset_t set;
  52                 sigemptyset(&set);
  53                 sigaddset(&set, SIGCANCEL);
  54                 __libc_sigprocmask(SIG_UNBLOCK, &set, 0);
  55         }
  56         pthread_exit(self->start(self->start_arg));
  57         return 0;
  58 }
  59
  60 int __uniclone(void *, int (*)(), void *);
  61
  62 #define ROUND(x) (((x)+PAGE_SIZE-1)&-PAGE_SIZE)
  63
  64 /* pthread_key_create.c overrides this */
  65 static const size_t dummy = 0;
  66 weak_alias(dummy, __pthread_tsd_size);
  67
  68 int pthread_create(pthread_t *res, const pthread_attr_t *attr, void *(*entry)(void *), void *arg)
  69 {
  70         int ret;
  71         size_t size, guard;
  72         struct pthread *self = pthread_self(), *new;
  73         unsigned char *map, *stack, *tsd;
  74         const pthread_attr_t default_attr = { 0 };
  75
  76         if (!self) return ENOSYS;
  77         if (!libc.threaded) {
  78                 sigset_t set;
  79                 sigemptyset(&set);
  80                 sigaddset(&set, SIGSYSCALL);
  81                 sigaddset(&set, SIGCANCEL);
  82                 __libc_sigprocmask(SIG_UNBLOCK, &set, 0);
  83                 libc.threaded = 1;
  84         }
  85
  86         if (!attr) attr = &default_attr;
  87         guard = ROUND(attr->_a_guardsize + DEFAULT_GUARD_SIZE);
  88         size = guard + ROUND(attr->_a_stacksize + DEFAULT_STACK_SIZE);
  89         size += __pthread_tsd_size;
  90         map = mmap(0, size, PROT_READ|PROT_WRITE|PROT_EXEC, MAP_PRIVATE|MAP_ANON, -1, 0);
  91         if (!map) return EAGAIN;
  92         if (guard) mprotect(map, guard, PROT_NONE);
  93
  94         tsd = map + size - __pthread_tsd_size;
  95         new = (void *)(tsd - sizeof *new - PAGE_SIZE%sizeof *new);
  96         new->map_base = map;
  97         new->map_size = size;
  98         new->pid = self->pid;
  99         new->errno_ptr = &new->errno_val;
 100         new->start = entry;
 101         new->start_arg = arg;
 102         new->self = new;
 103         new->tsd = (void *)tsd;
 104         new->detached = attr->_a_detach;
 105         new->attr = *attr;
 106         new->unblock_cancel = self->cancel;
 107         new->result = PTHREAD_CANCELED;
 108         memcpy(new->tlsdesc, self->tlsdesc, sizeof new->tlsdesc);
 109         new->tlsdesc[1] = (uintptr_t)new;
 110         stack = (void *)((uintptr_t)new-1 & ~(uintptr_t)15);
 111
 112         __rsyscall_lock();
 113
 114         a_inc(&libc.threads_minus_1);
 115         ret = __uniclone(stack, start, new);
 116
 117         __rsyscall_unlock();
 118
 119         if (ret < 0) {
 120                 a_dec(&libc.threads_minus_1);
 121                 munmap(map, size);
 122                 return EAGAIN;
 123         }
 124         *res = new;
 125         return 0;
 126 }
 127
 128 void pthread_exit(void *result)
 129 {
 130         struct pthread *self = pthread_self();
 131         struct __ptcb cb = { .__next = self->cancelbuf };
 132         self->result = result;
 133         self->canceldisable = 1;
 134         self->cancelasync = 0;
 135         __pthread_unwind_next(&cb);
 136 }