а что такое НМУ?

хтоническое и мифическое место, независимый математический университет

Привет. А кто-нибудь знает секретненькие packages или код для красивых графиков по linear mixed models? Спасибо

ggefects

Математический университет со свободным посещением и без приемных экзаменов.
Организован отколовшимися в 80 предподами мехмата. Нет гос диплома, но признается гарвардом например. Возможно лучшее место в стране что бы учить математику

Здравствуйте. Есть большой набор данных и есть подозрение, что в нем присутствуют повторяющиеся строки. В датасете речь о вещах, которые прибывают в страну: что-то люди просто оформляют на таможне для себя, а что-то потом перепродается. Если дальнейшая перепродажа, то по идее данные о вещи в датасете будут дублироваться, так как данные в этот же датасет заносятся при дальнейшей покупке этой вещи.  Проблема в том, что мне нужно определить уникальные вещи, для дальнейшего анализа,а у них нет никакого постоянного id.
я бы хотела определить уникальные вещи по определенным колонкам. Т.е. если я просто сделаю distinct или duplicated, то ничего не будет, потому что вещь проходит разные этапы регистрации и следовательно не все колонки одинаковы. Какую мне нужно использовать функцию, чтобы увидеть повторяющиеся строки , но по определенным столбцам?

Спасибо. Я знаю effects, это другое?

если не ошибаюсь, то этот пакет например для того, чтобы marginal effects показывать

Кек

лол, вы же буквально вчера собирались начать учить R

я чот даже не знаю, как реагировать на такое @@

Я?

Нене, сообщения удалены, не к вам реплай был :)

Ааа я уж испугалась))

Я бы попробовал не с векторизации а циклов начинать. Очень хорошая струтура прослеживается:  берем 1 элемн считаем А затем полученный результат приводим к Б.

и потом они везде будут делать циклы, угу. мне тут вместо ifelse уже хотели цикл сделать, а ля питон.
я циклы вообще в курсе даю в самом конце, когда сайт скрапим - там проще циклом пройти по набору страниц. а в других местах как-то и без них хорошо %)

Ну вот кстати это "если вы хотите пишите цикл, значит вы пишите не так" в Р может быть даже вредным. Не так страшны циклы, как пуш в вектор и всё вот это вот, о чём тут недавно писалось.

Если хочется плавно ввести в векторизацию, попробуйте через фильтры датасетов или веторов по результатам вызовов функций. Ну там банальное что-то вроде: выведете в консоль все элементы х, меньшие медианы.

А вообще может упор на data.table сыграл злую шутку и "лапша" из тайди помогла бы въехать студентам в тему? Я боюсь опять начинать этот холивар (сам использую и дата тейбл и тайди), но "прокидывание" результатов выполнения одной функции в другую может и правда хорошо вправить мозг на предмет построения каких-то дата пайплайнов и этих всяких флоу. А уж дальше пересаживаемся на дата тейбл и радуемся жизни)

ну дело-то не в векторизации, это достаточно сложная механика, как ни крути
у самых слабых проблемы вызывают задачки вида В векторе "vec" замените три случайных значения на NA
таблички дело сильно дальнее, там свои проблемы будут, конечно же. и тоже алгоритмические в первую очередь.
например, вместо %in% студенты любят рисовать лапшу через | или вообще был как-то случай с миллионом вложенных ifelse. или вместо того, чтобы вычислить в группе статистики по трем колонкам, они делают три таблички (по одной колонке) и потом их мерджат.

а сильные просят задачки посложнее, так как эти решают влет. и все это в одной группе.

> "лапша" из тайди помогла бы въехать студентам в тему
вот тут, кстати, у меня сомнения. мне было достаточно сложно объяснить парадигму data masking, когда я давал плотли и рвест. а студенты к этому времени уже были достаточно опытные, все же

Ну вот как раз про индексацию результатом вызова функции. Если на этом этапе проблемы, то тут только одно: опыт (нарешенность, как тут писали уже).

Из абстрактных советов: развивайте любовь к математике в целом, по жизни помогает. Говорю как любитель)). Говорите, что нет границ и жёстких рамок, пока вы действуете согласно заданной логике. Мне помогало в своё время и даже конструкции вроде names(x) <- c("a", "b") не вызывали вопросов. Это потом я уже ужаснулся тому, что мы результату вызова функции что-то там присваиваем.