170 похожих чатов

Привет гайз, такой вопрос, есть селери таска которая работает прям

очень долго

Она достает данные из базы и качает файлы которые прикреплены к записям из базые с файлового сервиса и заворачивает в архив в конце
Сейчас такая проблема что, таск убивается системой потому что после некоторого времени, селери начинает жрать дохера оперативы, полагаю что мемори лик где то

Как мне рещить мою проблему?

3 ответов

12 просмотров

Может херню скажу т.к. не особо шарю, но как насчёт того, чтобы разделить выполнение таски на несколько частей? Чтобы только после выполнения какой-то части выполнялась следующая без риска перегрузки оперативы.

Kel0- Автор вопроса
Anatoliy K
Может херню скажу т.к. не особо шарю, но как насчё...

ну я тоже так думал сделать, по требованию все выкаченные файлы должны быть в 1 архиве, хз как адекватно реализовать, только если не @celery_task def some_task(files: List[str], recrods_range: int) # get data from db in range records_range # download it and add to files list # run some_task.delay(files=files, records_range=records_range + 10)

Имеет причину, разбираться...

Похожие вопросы

Обсуждают сегодня

Всем привет, написал код ниже, но он выдает сегфолт, в чем причина? #include <stdio.h> #include <stdlib.h> #include <string.h> struct product { char *name; float price; };...
buzz базз
60
Хотел бы спросить у знающих, правильную ли я выбрал книгу для начала изучения ассемблера Юрова В.И ? Или есть более лучшие книги для начала обучения?
Botsman
25
Книга Юрова В.И пойдёт для обучения?
Botsman
24
$params = [ 'formid' => 'feedbackForm', 'formTpl' => '@CODE: <form class="form-validate" data-id="ajax_form"> <fieldset class="margin-bottom-md"> ...
Pathologic
1
> Примечательно, что новый владелец удаляет из GitHub любые жалобы, указывающие на подозрительную активность или смену владельца, и, видимо, рассчитывает на то, что пользовате...
Alex Sherbakov
2
Hey there Which is the best Linux destro for developers (coding)? To my research on reddit, they said Linux mint is good for mid level spec and Ubuntu for high Lev hardwar...
Wiz 🪄
11
Подскажите пожалуйста, а я могу вот такую штуку использовать? rpc, только реализованное в реббите https://www.rabbitmq.com/tutorials/tutorial-six-php ( или https://habr.com/ru...
Artyom
11
И ещё вопрос: можно ли типа как на дос как-то запариться и с помощью прерываний выводить текст, вместо функции printf ?
НѣкъиⰘижєжєиꙁъвьсєсвѣтьноѣсѣтиѥсть•
34
а мы ещё не созрели до того, чтобы создать отдельный чатик про настройку редакторов?
Cheese Syrowiecki
16
Всем привет! У меня почему-то по-разному отображается TListView в Debug и Release режимах (FireMonkey)! При запуске под Win приложения TListView заливается программо. в Debug ...
Александр COM
8
Карта сайта