1. лучше итераторами пользоваться. purrr::walk или просто data.table. В постановке 'снизить нагрузку на сервер БД' задача принципиально однопоточная и последовательная.
2. data.frame разбивается на чанки. Можно делать это 100500 способами, один из простейших: row_number() %/% 100000
3. В подходе data.table можно как-то так:

dt[, chunk := .I %/% 100000][, writeChunk(.SD), by = chunk]

где writeChunk(){.......; NULL} пишет кусок таблицы в базу

https://rdatatable.gitlab.io/data.table/index.html

Я все никак не мог понять, каким образом большая часть людей знающая R его выучила. Может не только у меня такой вопрос был. Я например выучил его только потому что в курсе на Coursera (Data Science specialization) он был основным.

Но на этой неделе проводил собеседование нескольких европейский студентов, и они все говорили что знают R потому что его учат в университетах. И только после, им давали другие языки. Тайна раскрыта.

> И только после, им давали другие языки.
не понял месседж, им давали другие языки до R? Или R первый язык?

R как первый язык в некоторых случаях.
Моя выборка - 2 человека из 3 сказали что R был первым языком, а потом уже введение в другие языки. И студенческие проекты групповые делались на R.

Как одна жалкая запятая меняет весь смысл предложения =D

А, сегодня ж пятница

День набросов

Спасибо за ваше очень содержательно личное мнение)
Показалось, что не одному мне эта тема любопытна.
Если это не так, напишите пожалуйста мне в личку, и больше не буду такими фактами делиться.

Я выучил R, так как пользовался SPSS, а там совсем страшный скриптовый язык 😁

В РФ тоже учат. В группе кажется эта тема какое-то время назад обсуждалась. В Спбгу на кафедре статмода, н-о точно есть.

Я лично учил на степике, правда это уже был язык наверное пятый или шестой

Сегодня пятница, когда поднимают/пытаются поднять холиварные споры. И очевидна тема про R, как его учить, и первым ли языком - холивар.  Я больше ничего иного в виду не имел.

Но это у меня не первый язык

Пятница? Холиварные споры? В далёком 2003 моим первым языком программирования был html

Но ведь, хтмл - это вообще не язык программирования 😄😄

Это как Вики разметку назвать языком программирования

Так это же не язык программирования ...

Это прям наброс ...

Только html5 является яп, так что, слишком жирно

А не языком разметки? Или язык разметки входит в множество языков программирования?

Есть базовая функция split(), которая разделит датафрейм на список датафреймов. Ну а потом по списку можно lapply()/purrr делать

на список по сколько строк? И как она поделит датафрейм из 7 строк, если надо поделить на чанки по 3 строки?
То есть чанк1 - это строки с 1 по 3
чанк 2 - это строки с 4 по 6

а последний чанк3 с одной оставшейся строкой номер 7 эта функция обрежет или наоборот добавит еще две пустые строки , чтобы чанк3 был с 7 по 9 строку?