скриптом, что бы это все работало как выстрелил и забыл? что бы обертка все сама скачала, настроила запустила и зааплодила результаты? И еще вопрос, тесты не коротковаты? если смотреть на абсолютные цифры там получается что в некоторых местах разница в сотые секунды, это вообще не попадает в ошибку измерения? может датасет пожирнее взять?
Можно скрипт сделать, правда пока есть вариативность с настройкой лимита по оперативке, с выбором коммита, который скачивать, с запуском если ClickHouse уже установлен. И если скрипт не работает, то смотреть туда точно не будут.
У нас есть датасет пожирнее, но его будет долго скачивать и распаковывать. Этот считайте минимально разумный. Можно ещё сделать генератор, но такой вариант не разработан. Каждый отдельный запрос выполняется недостаточное количество раз, бывают выбросы... Но общее количество запросов достаточное и получаются хорошие результаты, которые можно сравнивать. Можете проверить, проведя один тест несколько раз.
Обсуждают сегодня