AB
я память экономил. помогало
Size: a a a
2019 August 28
SS
т.е. перекодировать "\uXXXX" в два байта
SS
ну такое. вот это как раз уже преждевременная оптимизация)
SS
это если ты без словарей делаешь, оно может что-то и сэкономит
SS
но если ты переэтовал все строки в числа, то уже не так сильно это скажется
SS
там на самом деле остаются только phone и email
SS
которые и так и сяк latin1
SS
фамилии по-моему там тоже словарные, в сете. но тут уж вкусовщина. можно фамилии без словарей, если хочется true-way)
SS
но одни фамилии уже не так сильно сказываются
SS
вообще, если на то пошло, там есть очень крутые штуки, которые я опять же предлагал в чате, но их никто (у кого я спрашивал) не реализовал — PHS
SS
perfect hash functions
SS
на города, страны, интересы и всякое такое — самое оно б было
SS
и после второй фазы они вроде как не добавляются новые. но в целом можно успеть перестроить такой, небольшой словарик
SS
даже если что-то и добавится
SS
но увы и ах, Олег там уперся по-моему в group by, Алекс оптимизировал фильтры, всем не до них было)
SS
а еще я там за пару дней до финалки скинул им инфу про AF_PACKET :D потому что уже тогда там 75-80% в io упиралось у них
SS
но в итоге все равно не реализовали)
SS
ну я и сказал — у меня на это почти месяц ушло, чтоб разобраться, поэкспериментировать. и то я б не сказал, что там прямо бери и пользуйся. еще можно с месяц смело экспериментировать
SS
правда, там еще очень сильно к версии ядра привязывается. и это печально. возьми ядро чуть повыше, 3.12 скажем, и там уже по другому все пойдет, по-другому будет работать быстрее
AB
ну такое. вот это как раз уже преждевременная оптимизация)
для меня это было проще, видимо