169 похожих чатов

Как говорится, и снова здравствуйте! :) Есть новая головоломка для

джедаев.

Есть FCGI скрипт, в который пользователь отправляет файл CSV, файл сохраняется на сервер, дальше я достаю из него данные (использую Text::CSV::Encoded), делаю с ними небольшие манипуляции, и записываю измененные данные в новый файл, который потом загружаю в MySQL (8 версия) с помощью LOAD DATA LOCAL INFILE.

Небольшие файлы размером 10-20К строк обрабатывались без вопросов, а вот при попытке загрузить 250К строк я в какой-то страшный ад попал на неделю. MySQL начал дублировать некоторые строки при импорте, хотя в исходном загружаемом файле (уже после обработки) количество строк было всегда правильным! И вот я открываю этот файл vim'ом, смотрю - в нем все отлично, 250К строк, смотрю в MySQL после загрузки - а там 290К стало, некоторые тупо продублировались. Но эту фигню я смог победить - начал загрузку в MySQL вызывать не из Perl скрипта, а стал вызывать mysql команду как системную, и из неё вызывал LOAD DATA INFILE (уже без LOCAL). И после этого всё стало работать правильно!

Но, обнаружился новый баг, который я никак не могу побороть. Скрипт начинает читать один файл, редактировать данные, записывает их в новый файл, но как только доходит до конца, эта операция начинает работать сначала. То есть, каждый файл, который у меня создается для загрузки в MySQL, создаётся два раза! Я прямо сижу в консоли, делаю ls -l, и вижу как он по новой начинает создаваться, а в скрипте ничего такого нет, никакого цикла, или чего-то, что бы явно могло мне делать эту фигню.

Может, есть какие-то догадки? Могу прислать код в студию.

2 ответов

12 просмотров

А ты имя файла перед открытием каждый раз новое делай и потом логи почитай

Похожие вопросы

Обсуждают сегодня

Всем привет, написал код ниже, но он выдает сегфолт, в чем причина? #include <stdio.h> #include <stdlib.h> #include <string.h> struct product { char *name; float price; };...
buzz базз
32
Хотел бы спросить у знающих, правильную ли я выбрал книгу для начала изучения ассемблера Юрова В.И ? Или есть более лучшие книги для начала обучения?
Botsman
25
Книга Юрова В.И пойдёт для обучения?
Botsman
24
$params = [ 'formid' => 'feedbackForm', 'formTpl' => '@CODE: <form class="form-validate" data-id="ajax_form"> <fieldset class="margin-bottom-md"> ...
Pathologic
1
> Примечательно, что новый владелец удаляет из GitHub любые жалобы, указывающие на подозрительную активность или смену владельца, и, видимо, рассчитывает на то, что пользовате...
Alex Sherbakov
1
а мы ещё не созрели до того, чтобы создать отдельный чатик про настройку редакторов?
Cheese Syrowiecki
16
И ещё вопрос: можно ли типа как на дос как-то запариться и с помощью прерываний выводить текст, вместо функции printf ?
НѣкъиⰘижєжєиꙁъвьсєсвѣтьноѣсѣтиѥсть•
34
Всем привет! У меня почему-то по-разному отображается TListView в Debug и Release режимах (FireMonkey)! При запуске под Win приложения TListView заливается программо. в Debug ...
Александр COM
8
Ладно, ещё тупого спрошу. Код должен банально вывести значение регистра на консоль, на деле же не выводя ничего, просто оставляя нерабочую консоль (открыта, ничего не написан...
НѣкъиⰘижєжєиꙁъвьсєсвѣтьноѣсѣтиѥсть•
25
Hey there Which is the best Linux destro for developers (coding)? To my research on reddit, they said Linux mint is good for mid level spec and Ubuntu for high Lev hardwar...
Wiz 🪄
11
Карта сайта