а так я сейчас допиливаю шайни-парсер сайтов. тоже должен быть классный функционал 😂😂😂😂😂

Вау, спасибо, не видел такое

А показать?

я в личку отправлю немного сырую версию на бесплатном хостинге. Сейчас хочу сделать нормальную настройку переменных и чтобы можно было не только html текст парсить, но еще и тэги (н-р URL ссылок чтобы собирались, т.к. они редко в тексте продублированы)

Спасибо

я б глянул

А какой самый быстрый или лучший способ по чтению данных в R?

Я нашёл про fread из csv - 1 место
И чтение с локальной БД - 2 место

Спрашиваю, потому что встаёт вопрос о переходе с Power BI на Shiny.

vroom вроде еще хвалили

но я бенчи не делал

Ещё видел советы о сохранении data.frame в Rdata и что из него ещё быстрее идёт чтение.

На fst и qs поглядите. qs вроде быстрее, но fst можно читать частично - большой плюс, если  большой набор данных

А если у меня 3-4 больших файла по 70млн строк? Которые меж собой связываются один-к-одному или один-к-многим?

А ведь можно жестокую шутку с работодателем сыграть: перевести весь BI на Shiny и уволиться.

Все карты раскрыл=)

нет, связывания не будет. Ручками делать в коде. Но в fst можно читать только нужные строки, если их знать заранее. Есть еще arrow, там паркет. Сам не пробовал, но и по скорости, и под удобству должно быть хорошо

Понял, спасибо!

Зато какая популяризация R. Нового сотрудника уже со скиллом будут искать

У меня есть кандидат "на выход". Если на его место взять кого-то, умеющего в Shiny, то можно неплохой гешефт поиметь.

Это на самом деле интересный вопрос... Мне однажды по наследству досталась большая хрень, написанная в Экселе на vba. Ну еще формулы, еще оно в базы ходило... Логика была в каждом закаулке этого файла, комментариев и доков не было. К стыду своему, за три месяца я так и не смог заставить эту штуку нормально работать. Имхо, в shiny, не зная R,проще разобраться, чем во многих полувизуальных популярных инструментах

Вот уж от чего Господь уберёг, так это от VBA.