АК
Я про синтаксис. То, что у нас куча форматов дата.фреймов и они несовместимы между собой я только сегодня тут в ходе беседы узнал.
Это не форматы дата фреймов, а объекты разных классов с характерными для них атрибутами и методами.
Size: a a a
2020 May 12
AS
Вот за это нас, менеджеров, и не любят.
a
А что вы думаете про tidymodels? При всей любви к tidyverse, мне они кажутся немного избыточными...
AS
Я почитал недавнюю статью на Хабре про mlr3 и понял, что с ML надо на Python переезжать.
JS
Я использую в одном из решений igraph на графе похожести текстов (квадратная матрица). Partitioning делаю через short random walks с количеством итераций 10000. Что-то похожее на темы получается.
интересное... а что-то почитать про такое есть где???? есть для себя потребность тексты поисследовать...
JS
Я почитал недавнюю статью на Хабре про mlr3 и понял, что с ML надо на Python переезжать.
ужис? почему??
AB
интересное... а что-то почитать про такое есть где???? есть для себя потребность тексты поисследовать...
Приложил мою презу именно про этот подход
AB
По шагам выглядит так:
JS
Приложил мою презу именно про этот подход
благодарю! )
AB
1) Сырой текст лемматизируем. Я использую yandex mystem. И делаю многопоточность
AB
Вызов через system
PU
1) Сырой текст лемматизируем. Я использую yandex mystem. И делаю многопоточность
а что не udpipe? он хорош ведь
AB
2) строим proximity matrix. Тут надо с памятью не переборщить
JS
1) Сырой текст лемматизируем. Я использую yandex mystem. И делаю многопоточность
ага, тоже его применяю )
AB
а что не udpipe? он хорош ведь
Я его попробовал на новостях. Во-первых он не работает параллельно. Во-вторых, и это самое главное, леммы для некоторых слов получились нерусскими, я имею в виду, они неграмотные
JS
2) строим proximity matrix. Тут надо с памятью не переборщить
так...
AS
Было у нас поделие, которое в реальном времени выделяло топики в твиттере и строило по ним динамические визуализации. Мы с ним даже какой-то конкурс грантов в ВШЭ выиграли. Развивать не стали, а сейчас понимаю, что зря. Хотя опыт "продаж" в те же РИА Новости был не особо обнадёживающим. Чуть попозже скину скриншоты. Там всех стабильно веселило, что рядом с фоткой Путина всё время всплывал хэштег #хуйло.
AB
3) матрицу близостей загружаем в функцию igraph, не помню точно, типа, graph_from_affinity