Посоветуйте, как быть алгоритмически. Есть лог вида: дата-время|ид сессии|запрос Лог длинный, миллионы строк.

Question

Посоветуйте, как быть алгоритмически. Есть лог вида: дата-время|ид сессии|запрос Лог длинный, миллионы строк.

Сессий тоже много. Время жизни сессии - сутки, но айди могут повторяться.
Нужно по нему пройти, и по каждой сессии построить список запросов в том же порядке.
Причем запоминать его не нужно, после построения его достаточно закинуть в очередь для обработки и навсегда забыть.

Первый напрашивающийся метод - залить все в базу, и оттуда уже делать селекты по каждому айди сессии. Но будет долго, таблица большая.
Может, еще что-то можно придумать?

#programming #russian

0

22.03.2022

2 ответов

20 просмотров

Mikhail S Автор вопроса

Роман 🔐 KRD
$LogS = file_get_contents('log_file.txt'); $LogS =...

Логи в десятки гиг

0

22.03.2022

Роман 🔐 KRD · Accepted Answer

Роман 🔐 KRD

$LogS = file_get_contents('log_file.txt'); $LogS = explode(PHP_EOL,$LogS); $Result = array(); foreach($LogS as $Log) { $Log = explode('|',$Log); $Result[$Log[1]][] = $Log[2]; } print_r($Result);

0

22.03.2022

169 похожих чатов

Посоветуйте, как быть алгоритмически. Есть лог вида: дата-время|ид сессии|запрос Лог длинный, миллионы строк.

2 ответов

Похожие вопросы