在返回Go Runtime之前，Cgo在x_cgo_notify_runtime_init_done中被阻止

Question

我试图自己编写runc exec，但在实现nsenter模块时遇到了问题。

这是示例代码：

package main
import "fmt"
/*
#define JUMP_PARENT 0x00
#define JUMP_CHILD  0xA0
#define _GNU_SOURCE
#include <stdio.h>
#include <stdlib.h>
#include <unistd.h>
#include <sched.h>
#include <setjmp.h>

char child_stack[4096] __attribute__ ((aligned(16)));

int child_func(void *arg) {
    jmp_buf* env  = (jmp_buf*)arg;
    longjmp(*env, JUMP_CHILD);
}

__attribute__((constructor)) void init(void) {
    printf("init...\n");
    jmp_buf env;
    switch(setjmp(env)) {
        case JUMP_PARENT: 
        printf("JUMP_PARENT\n");
            int child_pid = clone(child_func, child_stack, CLONE_PARENT, env);
            printf("CHILD_PID: %d\n", child_pid);
            exit(0);
        case JUMP_CHILD:
            printf("JUMP_CHILD\n");
            return;
    }
}
*/
import "C"

func main() {
    fmt.Println("main...")
}

这是CentOS7中的输出：

[root@localhost cgo-practive]# go build .
[root@localhost cgo-practive]# ls
cgo-practive  main.go
[root@localhost cgo-practive]# ./cgo-practive
init...
JUMP_PARENT
CHILD_PID: 14348
[root@localhost cgo-practive]# JUMP_CHILD
// program blocked here

然后我使用gdb找出阻止的原因：

(gdb) list
28              exit(0);
29          case JUMP_CHILD:
30              printf("JUMP_CHILD\n");
31              return;
32      }
33  }
34  */
35  import "C"
36
37  func main() {
(gdb) info stack
#0  0x00007efd6f9684ed in __lll_lock_wait () from /lib64/libpthread.so.0
#1  0x00007efd6f966170 in pthread_cond_broadcast@@GLIBC_2.3.2 () from /lib64/libpthread.so.0
#2  0x00000000004862e6 in x_cgo_notify_runtime_init_done (dummy=<optimized out>) at gcc_libinit.c:69
#3  0x0000000000451070 in runtime.asmcgocall () at /usr/local/go/src/runtime/asm_amd64.s:637
#4  0x00007ffdec4b5c30 in ?? ()
#5  0x000000000044efd1 in runtime.malg.func1 () at /usr/local/go/src/runtime/proc.go:3289
#6  0x000000000044f886 in runtime.systemstack () at /usr/local/go/src/runtime/asm_amd64.s:351
#7  0x000000000042c5b0 in ?? () at /usr/local/go/src/runtime/proc.go:1146
#8  0x000000000044f719 in runtime.rt0_go () at /usr/local/go/src/runtime/asm_amd64.s:201
#9  0x0000000000000000 in ?? ()

似乎该程序在x_cgo_notify_runtime_init_done被阻止，但我不擅长cgo，无法弄清楚为什么它被阻止。

谢谢。

Answer 1

正如man page所说

所有运行Linux的处理器（HP PA处理器除外）的堆栈都会向下增长，因此child_stack通常指向为子堆栈设置的内存空间的最顶层地址。

所以你应该使用下面的代码

int child_pid = clone(child_func, &child_stack[4096], CLONE_PARENT, &env);