LW
ну и компиляторописатели используют его и анализируют
Size: a a a
2019 December 12
W
ну и компиляторописатели используют его и анализируют
Они щас на IR, llvm переходят.
Ибо проще написать бек к llvm, чем пилить с нуля.
Но те кто хочет, те пишут.
Ибо проще написать бек к llvm, чем пилить с нуля.
Но те кто хочет, те пишут.
LW
оно не очень умеет всякие SSE/simd
LW
Вон год назад кто-то выложил json парсер, делающий два гигабита на ядро. Тоже SSE intrinsics. На llvm бы не сделал
W
оно не очень умеет всякие SSE/simd
Ну это да, там же RISC-based за основу брался.
А где риски и где sse/avx?
А где риски и где sse/avx?
W
Вон год назад кто-то выложил json парсер, делающий два гигабита на ядро. Тоже SSE intrinsics. На llvm бы не сделал
Одно дело писать компилятор под какую-то новую архитектуру, и совсем другое оптимизированный под железо софт.
LW
Разные цели - разные инструменты.
к чему этот тезис?
W
к чему этот тезис?
К тому, что если я буду писать под новую, к примеру arm-based архитектуру, то мне проще прикрутить бек к llvm, нежели писать с нуля.
>"Вон год назад кто-то выложил json парсер, делающий два гигабита на ядро. Тоже SSE intrinsics. На llvm бы не сделал"
А это не компилятор, это оптимизированный под доп.инструкции процессора софт.
Вещи разные.
>"Вон год назад кто-то выложил json парсер, делающий два гигабита на ядро. Тоже SSE intrinsics. На llvm бы не сделал"
А это не компилятор, это оптимизированный под доп.инструкции процессора софт.
Вещи разные.
YP
Вон год назад кто-то выложил json парсер, делающий два гигабита на ядро. Тоже SSE intrinsics. На llvm бы не сделал
Оп, а можно подробнее про парсеры на ASM? У меня 2 года назад проблема была, но не с JSON, а xml, там файл что-то в районе 5 или 7 ГБ был
LW
К тому, что если я буду писать под новую, к примеру arm-based архитектуру, то мне проще прикрутить бек к llvm, нежели писать с нуля.
>"Вон год назад кто-то выложил json парсер, делающий два гигабита на ядро. Тоже SSE intrinsics. На llvm бы не сделал"
А это не компилятор, это оптимизированный под доп.инструкции процессора софт.
Вещи разные.
>"Вон год назад кто-то выложил json парсер, делающий два гигабита на ядро. Тоже SSE intrinsics. На llvm бы не сделал"
А это не компилятор, это оптимизированный под доп.инструкции процессора софт.
Вещи разные.
Я не очень понимаю, это мысли вслух или возражение на какой-то мой стейтмент.
LW
Оп, а можно подробнее про парсеры на ASM? У меня 2 года назад проблема была, но не с JSON, а xml, там файл что-то в районе 5 или 7 ГБ был
В виндах очень быстрый парсер xml в дллках .net вроде был. Не помню скорость, впрочем. Но так сходу побить его не получалось.
LW
Оп, а можно подробнее про парсеры на ASM? У меня 2 года назад проблема была, но не с JSON, а xml, там файл что-то в районе 5 или 7 ГБ был
Парсеры как нужно писать: смотреть, чтобы делать минимум инструкций за байт парсинга. Как делать? Надо загружать сразу 128 бит и смотреть, есть ли в них нужный байт/маска/паттерн одной simd-инструкцией
YP
В виндах очень быстрый парсер xml в дллках .net вроде был. Не помню скорость, впрочем. Но так сходу побить его не получалось.
Спасибо за наводку, поищу :)
PG
У 3 из 4 новых аккаунтов аниме персонажи на аватарах. Что ж ботоводы на таких глупостях палятся-то...
Эти ещё ничего, вот когда у всех ботов одна и та же пикча с фотостока
SY
Оп, а можно подробнее про парсеры на ASM? У меня 2 года назад проблема была, но не с JSON, а xml, там файл что-то в районе 5 или 7 ГБ был
На ассемблере не видел, но вот есть такой, например, https://github.com/lemire/simdjson
LW
я про него, да. технически, это сиплбсплюс с интринсиками, но для того, чтобы такое писать, думают в предметке ассемблера: load/store, register transfer, pipeline management, etc. https://github.com/lemire/simdjson/blob/master/src/haswell/simd.h
LW
я про него, да. технически, это сиплбсплюс с интринсиками, но для того, чтобы такое писать, думают в предметке ассемблера: load/store, register transfer, pipeline management, etc. https://github.com/lemire/simdjson/blob/master/src/haswell/simd.h
зная c++, но не асм, ты такое не только не напишешь, но даже не прочтёшь.
YP
На ассемблере не видел, но вот есть такой, например, https://github.com/lemire/simdjson
Спасибо