Я вот ровно про твое решение подумал. Раз в сутки процессить историю и писать в сторадж. Только я бы наверно складывал блоб в gzip, чтобы стримингом грузить, без магии формата. Уверен что под это даже какая-нить либа есть:)

да. блок-эдиторы это все прекрасно и красиво, когда работаешь в одну сторону (создаешь док с нуля), а когда УЖЕ есть жизненный говно-html из краулера, из ворда или из apple-mail - все они нервно стоят в сторонке, а на сцену выходят старые дедовские олдскул-тулзы

собственно, как и во всем айти

Но тут есть трейдоф, точнее так - gzip как потоковое сжатие я бы точно оставил, а вот на счет формата да, надо проверять, возможно готовый стандартный парсер с поддержкой стриминга было бы проще использовать. Главное добиться возможности начать обработку без полного скачивания в темп. Просто 10гб (или сколько оно там у вас) CSV файл выглядит граблями:)
P.S. Блин, я вот буквально полмесяца не работаю и кажется мозг цепляется уже за что нибудь чтобы просто подумать...

вот верное замечание. для перфоманса важно 1) установить метрики, которые важны для вашего продукта. например, "главная страница грузится быстрее, чем за 5с в 50 персентиле" 2) трекать эти метрики на предмет регрессий и соответственно фиксить 3) тратить время на сфокусированные улучшения, если вы знаете, что например загрузка главной страницы влияет на ретеншн. Весь перформанс в привязке к продукту, а скорость либ это просто инструмент решения этих задач

Сравнил сейчас навигатор 2ГИС и Яндекс. На удивление, в 2ГИС гораздо проще понять куда в развязке поехать.
НЕ реклама.)

А по опыту использования, развязку 2гис анонсирует по факту ее проезда, да

не выглядит значительно удобнее. Но вроде неплохо

2gis тут взял и удалил весь Кипр пару месяцев назад, а это единственный способ надежно найти тут любую улицу/дом/огранизацию/часы работы... был...

Раньше была так. Сейчас с выключенным звуком еду.

Да. Виновато европейское законодательство. На самом деле, можно поставить и сейсас Кипр, но хаком.

Разделение полос лучше выглядит и видно где заезжаешь под мост, а где на него.

Ну если смотреть - вполне ок. Но тоже есть вопросы, например движение по полосам появляется далеко не всегда и везде по понятной логике. Особенно любит глючить на развязках Садового кольца у съезда на большой Москворецкий мост.

Но самая большая претензия к 2гис это любая пробка. Совершенно любая. Из-за небольшого затора на Ярославке на минуту, например, он очень часто предлагает круги увеличивающие время на минут 20. Это прям регулярно, не проходит даже после фидбэка неоднократного с маршрутом и никакой логике не поддается. То есть там даже нет простого сравнения времени простоя, там просто логика избегания ближайшего затора

это какое законодательство запрещает мобильные приложения, но оставляет сайты?

Напишу им, посмотрим, что скажут.)

Почему из Google maps не удалили Кипр?