тесты.
Машина: Debian 12 bookworm-последня на VMWare Workstation
Длаю так:
git clone --recursive https://github.com/tarantool/tarantool.git -b 2.11.0 tarantool_2.11
cd tarantool_2.11
git submodule update --init --recursive
make clean
rm CMakeCache.txt
git clean -xffd
git submodule foreach --recursive 'git clean -xffd'
cmake . -DCMAKE_BUILD_TYPE=RelWithDebInfo
make -j `nproc`
export TEST_RUN_RETRIES=3 SERVER_START_TIMEOUT=290 REPLICATION_SYNC_TIMEOUT=300 TEST_TIMEOUT=310 NO_OUTPUT_TIMEOUT=320
export PRESERVE_ENVVARS=TEST_RUN_RETRIES,SERVER_START_TIMEOUT,REPLICATION_SYNC_TIMEOUT,TEST_TIMEOUT,NO_OUTPUT_TIMEOUT
make test
Иногда что-то пофлапывает, но в Test Summary Report с заметным постоянством показывается вот такое:
Иногда:
/root/devel/tarantool_2.11/third_party/luajit/test/tarantool-tests/lj-512-profiler-hook-finalizers.test.lua (Wstat: 256 (exited 1) Tests: 1 Failed: 1)
Failed test: 1
Non-zero exit status: 1
Всегда:
/root/devel/tarantool_2.11/third_party/luajit/test/tarantool-tests/misclib-sysprof-lapi.test.lua (Wstat: 256 (exited 1) Tests: 19 Failed: 2)
Failed tests: 11-12
Non-zero exit status: 1
# free
total used free shared buff/cache available
Mem: 8096720 692864 3372188 716 4354016 7403856
Swap: 998396 1804 996592
# cat /proc/cpuinfo
processor : 0
vendor_id : GenuineIntel
cpu family : 6
model : 183
model name : 13th Gen Intel(R) Core(TM) i7-13700K
stepping : 1
microcode : 0x10e
cpu MHz : 3417.599
cache size : 30720 KB
Впрочем при сборке под packpack
export PACKPACK_EXTRA_DOCKER_RUN_PARAMS='--init' TEST_RUN_RETRIES=3 SERVER_START_TIMEOUT=290 REPLICATION_SYNC_TIMEOUT=300 TEST_TIMEOUT=310 NO_OUTPUT_TIMEOUT=320 PRESERVE_ENVVARS=TEST_RUN_RETRIES,SERVER_START_TIMEOUT,REPLICATION_SYNC_TIMEOUT,TEST_TIMEOUT,NO_OUTPUT_TIMEOUT
ARCH=amd64 OS=debian DIST=bullseye make -f .pack.mk package
тест misclib-sysprof-lapi тоже не проходит...
Test Summary Report
-------------------
/build/tarantool-2.11.0/third_party/luajit/test/tarantool-tests/misclib-sysprof-lapi.test.lua (Wstat: 256 Tests: 19 Failed: 2)
Failed tests: 11-12
Non-zero exit status: 1
ЧЯДНТ?
Попробовал на ARM64 аналогичным образом
ARCH=aarch64 OS=debian DIST=bullseye make -f .pack.mk package
там тоже
Statistics:
* pass: 1477
* disabled: 166
* undone: 59
Но там у машины всего 8 гигабайт, так что ХЗ что это
Посмотрели с @Buristan еще разок: действительно есть багос и flaky тест. 1. Багос в нашем профилировщике при работе со встроенными функциями Lua: уже в работе (https://github.com/tarantool/tarantool/issues/8594) 2. Тест, на оригинальный профилировщик в Lua, который проверяет нетривиальный сценарий и ожидает предопределенное количество семплов за указанный период времени. Можно поиграться с коэффициентами, но в идеале нужно написать более стабильный тест (на данный момент мы дизайним фреймворк для таких непростых тестовых сценариев). Все, что сейчас могу посоветовать для решения проблемы: 1. Радикальное простое решение (от меня): удалить Lua файлы, которые выплюнула ошибка, чтобы они не мешали сборке. 2. Не такое радикальное (от @Buristan): можно поиграться с лимитами (т.е. понизить их).
Спасибо!! Пошел по третьему пути - забил на результаты этих двух тестов.
Это звучит, как самый радикальное и бескомпромисное решение :D
Обсуждают сегодня