VO
нет там никакой записи в базу
Size: a a a
2020 October 18
VO
в два хэша пишет. ну сплит, регэксп нерекурсивный
О
Выключить всю логику, посмотреть с какой скоростью читается, постепенно включать и смотреть что влияет
VO
блин, да нет ам логики. какой там примерно предел-то? может и правда 1000?
О
предел -- это с какой скоростью тебе наливают этот лог. если у тебя скрипт будет успевать всё это переваривать то ты в него упрёшься
О
если лог медленно отдаётся -- тогда всё будет медленно, конечно
VO
лог я с ssd читаю.
О
ну вот попробуй этим скриптом прочитать его с закомментированными всеми строчками внутри цикла чтения строк. сколько получится?
О
ну и Devel::NYTProf хорошая штука
О
блин, да нет ам логики. какой там примерно предел-то? может и правда 1000?
может у тебя строки по мегабайту каждая?
VO
нет. похоже или переписывание хеша или постоянные присвоения конструкции типа $x{$y} = [ a, b ]
О
А что в качестве ключей $y? Что за значения?
VO
строка байт 80, значения -- два целых
SZ
в два хэша пишет. ну сплит, регэксп нерекурсивный
Регекспы в перле очень медленные
P
Регекспы в перле очень медленные
А где они быстрее?
b
регекпы могут быть неоптимально написаны. Я в плюсах взял регескп для парса урлов со SO. В результате неправльный (кривой урл) длинной где-то 200 байтов парсит секунды 4.
SZ
А где они быстрее?
Я уже приводил примеры
AP
А где они быстрее?
В perl6/raku, наверное...
AB
в два хэша пишет. ну сплит, регэксп нерекурсивный
И потом print?
VO
приннт сэмплированный