Ну я же не сам придумал так по датам фильтровать. Вот из первого попавшегося ответа на SO пример: filter(mydf, date >= "2014-12-02", date <= "2014-12-05")

Всю жизнь так пишу. С "ответом" не сошлось только сейчас.

Сейчас-то, естественно, разберусь и приму меры.

Ещё один пример того, что бездумно копипасть не следует. При сравнении разных типов всегда будут неявные преобразования. А вот что во что будет преобразовано зависит от многих факторов и поэтому всегда следует явно приводить типы.

POSIXct - коварный тип, т.к. имеет привязку к локальному часовому поясу и ориентируется на переменную окружения TZ.

сравнил в presto два выражения, правда, по одному вот этому примеру
регулярка пилит в полтора раза дольше, чем сплит
но я хз, как оно на большом массиве будет работать. по идее, там не должно быть нелинейного увеличения времени

собственно, поэтому я при работе с бд явно выставляю зону gmt в r-сессии %)

Так вот куда у меня в отчётах миллионы пропадают...

:))))

Спасибо. Надо попробовать RMSSQL (хотя меня немного напрягает, что там последние изменения были 5 лет назад)

Пока ничего не помогает в записи данных в таблицу. Есть подозрение, что проблема с тем, что в таблицы в БД есть nvarchar колонки. Указание типов колонок в аргументе field.types проблему не решило.

RODBC::sqlSave выкидывает из сессии вообще.
DBI::dbWriteTable выдаёт ошибку nanodbc/nanodbc.cpp:1617: 00000: [Microsoft][ODBC Driver 17 for SQL Server]Invalid character value for cast specification

Гугление предлагает костыли. Видимо придётся писать универсальную функцию создания sql запроса на запись данных))

Лучше odbc попробовать, именно его RStudio рекомендует

Да, когда столкнулся с задачей, действовал по инструкции на сайте RStudio. Но вот эта задачка никак не разрешается.  Почти уверен,  что дело в nvarchar именно.

может, загнать все строками и потом уже на стороне бд обработать?

Invalid character value for cast specification
я бы еще проверил на наличие каких-нибудь левых символов в ваших данных

Если бы надо было таблицу создавать, то да. А мне обновлять надо.

А вот левые символы - это какие? В строках кириллица и латиница, максимум есть /

В целом решение есть, через формирование запроса функцией из данных и отправкой его в БД. Но хочется чего-то более элегантного и унифицированного для разных таблиц

во-первых, можно создать промежуточную таблицу
а потом парой операций обработать эту таблицу и результат вставить в целевую, и дропнуть промежуточную
во-вторых, левые символы - всякие непечатные символы, и прочее, миллион всего может быть. вы их даже визуально не отловите, так как R их может не отображать в таблице

Смотрели что в профайлере?

Спасибо. Пока оставлю костыль с формированием текста запроса и отправкой его в БД)

С символами надо посмотреть. Тут скорее даже обидно, что pandas.to_sql справляется, пусть и с указанием типов колонок, а R нет))

Если вдруг найду элегантное решение - отпишусь.

сегодня наталкивался на открытый вопрос на гитхабе DBI по поводу проблем с запросом к БД, где запрашивается длинное текстовое поле – когда эта колонка была не в конце запроса, людям выдавало ошибку, как вы написали. но это касалось запрашивания, а не записи

У меня и прав-то таких нет. Поговорю с админами))