DP
условно говоря продавец в магазине получается 600-1000 евро, лисп суперзвезда 3К )
Size: a a a
2021 May 04
DP
точнее, лиспер скорее всего меньше - потому что будет работать скорее всего при каком-нибудь исследовательском центре / универе
2021 May 05
SD
Почему sbcl жрёт много памяти? Читаю 2.7гб csv файл (дамп авторов open library). Процесс питона занимает примерно 5 гб в памяти, а sbcl выжирает в районе 13. В лиспе пишу в array, создаю объекты класса author. До этого пробовал просто листы, полученные из cl-csv сохранять. Разницы нет вроде. Ещё питон отрабатывает значительно быстрее лиспа.
a
Про парсинг csv часто задают этот вопрос, даже тред из
comp.lang.lisp есть, можно найти в гуглгруппах.SD
Именно про потребление памяти? Скорость меня сейчас чуть меньше удивляет. По идее то, что лежит в памяти, к csv уже не относится.
KD
Из чисто текстового формата делаете кучу объектов и удивляетесь чего оно в размерах прибавляет?
SD
Ну это я уже от безысходности объекты начал пробовать. Листы меня устраивают как таковые
SD
На всякий случай. Меня удивляет разница между CPython 3.9 и SBCL 2.1.2. Понятно, что текст будет занимать меньше места, чем разобранный CSV. Но питон умудряется это вместить в 5-6гб. В отличие от 13гб лиспа.
KD
надо глянуть куда столько памяти улетает
KD
жаль что прямо сейчас сайт почему-то лежит
KD
в мануале было про профайлинг нормально написано
SD
(room) показал, что 12 миллиардов байт уходит на 34 миллиона simple-character-string objects
KD
ёпь
KD
UTF32 же
SD
Хм. Логично. Возможно на ютф8 перейти?..
a
…если не на ascii
KD
Можно
KD
Только это будет не строки уже, а bytes
KD
SB-EXT:STRING-TO-OCTETS и SB-EXT:OCTETS-TO-STRINGSD
Спасибо! Буду изучать