Skip to content
Snippets Groups Projects

Picodata run hangs

    • Closed Issue created by Yaroslav Dynnikov @rosik

    https://t.me/c/1445372156/20017

    Дмитрий Кибирев, [22/07/2024 15:32] Похоже, что Алексей Кузин раскопал причину зависания picodata в supervisord:

    • При запуске с помощью picodata run процессы в контейнере зависали. Я переписал обвязку на использование multirun и обнаружил, что процесс пикодаты стопается на сигнале SIGTTOU так как пытается из фонового процесса что-то записать в tty. Было потрачено много времени, но в итоге нашелся воркэраунд с подачей на вход процесса /dev/null. В документации об этом ничего. А по-хорошему надо, чтобы была опция демонизации

    @y_dynnikov

    Yaroslav Dynnikov, [22/07/2024 15:45] А без супервизора это можно как-то воспроизвести?

    Alexey Protsenko, [22/07/2024 16:14] похоже воспроизводится. поведение похоже на то, что с супервизором запускал командой ssh root@10.5.1.138 "/usr/bin/picodata run"

    image

    Дмитрий Кибирев, [22/07/2024 16:16] Можно и на localhost запускать с аналогичным результатом

    Alexey Protsenko, [22/07/2024 16:20] не у всех установлен sshd, а тут готовый сервер для тестов. могу и супервизор там поднять-настроить.

    Alexey Protsenko, [22/07/2024 16:25] после Ctrl+C процессы на сервере остаются, я проваливаюсь в консоль и работают запросы.

    image

    To upload designs, you'll need to enable LFS and have an admin enable hashed storage. More information

    Child items 0

    • No child items are currently assigned. Use child items to break down this issue into smaller parts.

    Activity

    • Yaroslav Dynnikov added bug label

      added bug label

    • Yaroslav Dynnikov changed milestone to %24.6 - Plugins and Tiers

      changed milestone to %24.6 - Plugins and Tiers

    • Yaroslav Dynnikov
      Yaroslav Dynnikov @rosik ·
      Author Maintainer 
      ssh localhost "/home/rosik/w/picodata/target/debug/picodata run"

      image

      (gdb) bt
#0  0x00007b4520d1ba9a in __GI___libc_read (nbytes=4096, buf=0x7b452037eefb, fd=0) at ../sysdeps/unix/sysv/linux/read.c:26
#1  __GI___libc_read (fd=0, buf=0x7b452037eefb, nbytes=4096) at ../sysdeps/unix/sysv/linux/read.c:24
#2  0x00007b4520c93df5 in __GI__IO_file_xsgetn (fp=0x7b4520e038e0 <_IO_2_1_stdin_>, data=<optimized out>, n=8192) at ./libio/libioP.h:1030
#3  0x00007b4520c8648b in __GI__IO_fread (buf=buf@entry=0x7b452037eef8, size=size@entry=1, count=count@entry=8192, fp=0x7b4520e038e0 <_IO_2_1_stdin_>) at ./libio/iofread.c:38
#4  0x00000000030d60d3 in reader_file (L=<optimized out>, ud=0x7b452037eef0, size=0x7b452037ed78) at /home/rosik/w/picodata/tarantool-sys/third_party/luajit/src/lj_load.c:80
#5  0x00000000030ecf18 in lex_more (ls=ls@entry=0x7b452037ee30) at /home/rosik/w/picodata/tarantool-sys/third_party/luajit/src/lj_lex.c:49
#6  0x00000000030ed2dc in lex_next (ls=0x7b452037ee30) at /home/rosik/w/picodata/tarantool-sys/third_party/luajit/src/lj_lex.c:59
#7  lj_lex_setup (L=L@entry=0x401c3378, ls=ls@entry=0x7b452037ee30) at /home/rosik/w/picodata/tarantool-sys/third_party/luajit/src/lj_lex.c:411
#8  0x00000000030d5fe3 in cpparser (L=0x401c3378, dummy=<optimized out>, ud=0x7b452037ee30) at /home/rosik/w/picodata/tarantool-sys/third_party/luajit/src/lj_load.c:36
#9  0x00000000030c8984 in lj_vm_cpcall () at buildvm_x86.dasc:1202
#10 0x00000000030d615d in lua_loadx (L=0x401c3378, reader=reader@entry=0x30d60a0 <reader_file>, data=data@entry=0x7b452037eef0, chunkname=chunkname@entry=0x578a9e5 "=stdin", mode=mode@entry=0x0)
    at /home/rosik/w/picodata/tarantool-sys/third_party/luajit/src/lj_load.c:58
#11 0x00000000030d629c in luaL_loadfilex (L=L@entry=0x401c3378, filename=filename@entry=0x0, mode=mode@entry=0x0) at /home/rosik/w/picodata/tarantool-sys/third_party/luajit/src/lj_load.c:101
#12 0x00000000030d636b in luaL_loadfile (L=L@entry=0x401c3378, filename=filename@entry=0x0) at /home/rosik/w/picodata/tarantool-sys/third_party/luajit/src/lj_load.c:119
#13 0x0000000002ecae0c in run_script_f (ap=<error reading variable: value has been optimized out>) at /home/rosik/w/picodata/tarantool-sys/src/lua/init.c:1165
#14 0x0000000002eb7a30 in fiber_cxx_invoke(fiber_func, typedef __va_list_tag __va_list_tag *) (f=<optimized out>, ap=<optimized out>) at /home/rosik/w/picodata/tarantool-sys/src/lib/core/fiber.h:1283
#15 0x0000000002e5a6d7 in fiber_loop (data=<optimized out>) at /home/rosik/w/picodata/tarantool-sys/src/lib/core/fiber.c:1085
#16 0x0000000002ebf948 in coro_init () at /home/rosik/w/picodata/tarantool-sys/third_party/coro/coro.c:108
      Edited by Yaroslav Dynnikov
    • Yaroslav Dynnikov
      Yaroslav Dynnikov @rosik ·
      Author Maintainer

      Внимание на 13 фрейм: https://git.picodata.io/picodata/tarantool/-/blob/2.11.2-picodata/src/lua/init.c#L1165

      image

    • Yaroslav Dynnikov
      Yaroslav Dynnikov @rosik ·
      Author Maintainer

      Я проверил

      interactive = 0                      
is_a_tty = 0

      Тарантул думает что это cat init.lua | tarantool и исполняет

    • Yaroslav Dynnikov
      Yaroslav Dynnikov @rosik ·
      Author Maintainer

      Решили убрать этот кусок предиката из форка (!interactive && !is_a_tty)

    • Dmitry Ivanov mentioned in merge request !1182 (merged)

      mentioned in merge request !1182 (merged)

    • Dmitry Ivanov closed with merge request !1182 (merged)

      closed with merge request !1182 (merged)

    • Егор Ивков changed milestone to %24.5 - Lowercase

      changed milestone to %24.5 - Lowercase

    Please register or sign in to reply