Size: a a a

AI / Big Data / Machine Learning

2020 May 08

Z

Zikrilloxon in AI / Big Data / Machine Learning
А как вообще можно тренировать caffe model ???
источник

Z

Zikrilloxon in AI / Big Data / Machine Learning
Недавно нашёл скрипт в python для работы в реальном времени
источник

.

. in AI / Big Data / Machine Learning
Кто может уделить небольшое количество времени (10-15 минут) и помочь мне с датасетом из кирилицы.

Я так и не понял как правильно создать датасет из имеющихся картинок с буквами. Прошу помощь у тех, кто не против помочь написать скрипт для создания датасета, а обучать я уже буду сам.
А то сроки уже поджимают...

У меня есть 10к картинок с буквами (1) и чуть меньше 10к + csv файл
источник
2020 May 09

◇Сущ in AI / Big Data / Machine Learning
Доброго времени суток! Есть два вопроса:
1. Кто-нибудь слышал про ленточные нейронные сети?
2. Я работал object_detection tensorflow
Нужно написать почти тоже самое, но так, чтобы нейронка обучалась дополнительно на поступающих в неё фотографиях, а если на фотографии объект, который она не знает, то запоминала его и использовала в дальнейшем
Может кто-нибудь дать совет в какую сторону двигаться?
источник

A

Alexander in AI / Big Data / Machine Learning
Ребят подскажите пожалуйста курсы о продакшене в DS. Особенно о flask и AWS. Использую ML и DL много лет, но очень сильно не хватает знаний чтобы выйти за пределы jupyter notebook. Хотелось бы чтобы курсы подводили к тому как запустить свою python модель на сервере.
источник

S

Stepan in AI / Big Data / Machine Learning
Добрый день. Не могу оттюнить нормально LightGBM. Может есть у кого литература какая, статейка на эту тему?
источник

A

Alexey in AI / Big Data / Machine Learning
источник
2020 May 10

ME

Makhlov Egor in AI / Big Data / Machine Learning
День добрый!
Какие параметры у сети вы бы меняли, чтобы точно определить на каком устройстве (CPU (xeon phi к примеру) или GPU (K80, K100)),  ее эффективнее обучать (не изменяя архитектуру при этом)? (batch-size, к примеру)

Столкнулся с вопросом апробации вычислительных архитектур для LSTM и CNN сетей и не могу придумать как подобное сравнение грамотнее организовать.
источник

D•

Dan • Captain in AI / Big Data / Machine Learning
◇Сущ
Доброго времени суток! Есть два вопроса:
1. Кто-нибудь слышал про ленточные нейронные сети?
2. Я работал object_detection tensorflow
Нужно написать почти тоже самое, но так, чтобы нейронка обучалась дополнительно на поступающих в неё фотографиях, а если на фотографии объект, который она не знает, то запоминала его и использовала в дальнейшем
Может кто-нибудь дать совет в какую сторону двигаться?
Вы не могли бы подсказать в каком контексте вы слышали что-то про ленточные нейронные сети? Страсть как любопытно уже второй день
источник

D•

Dan • Captain in AI / Big Data / Machine Learning
Alexander
Ребят подскажите пожалуйста курсы о продакшене в DS. Особенно о flask и AWS. Использую ML и DL много лет, но очень сильно не хватает знаний чтобы выйти за пределы jupyter notebook. Хотелось бы чтобы курсы подводили к тому как запустить свою python модель на сервере.
про использование амазона в ml точно было в бесплатных вебинарах Отуса, я попробую уточнить и прислать ссылку, но вот прямо курсы не знаю, тематика достаточно узкая и короткая, там ничего сложного нет, и освоить можно чуть ли не по официальной документации, подкрепляя при необходимости примерами из ютуба
источник

I

Ivan in AI / Big Data / Machine Learning
Dan • Captain
Вы не могли бы подсказать в каком контексте вы слышали что-то про ленточные нейронные сети? Страсть как любопытно уже второй день
Может, сверточные, и пвтоиспрпвление?
источник

D•

Dan • Captain in AI / Big Data / Machine Learning
Ivan
Может, сверточные, и пвтоиспрпвление?
То, что там CNN это понятно, судя по второй части вопроса, а вот что такое ленточные — так и не понятно :)
источник

u

undiabler in AI / Big Data / Machine Learning
Makhlov Egor
День добрый!
Какие параметры у сети вы бы меняли, чтобы точно определить на каком устройстве (CPU (xeon phi к примеру) или GPU (K80, K100)),  ее эффективнее обучать (не изменяя архитектуру при этом)? (batch-size, к примеру)

Столкнулся с вопросом апробации вычислительных архитектур для LSTM и CNN сетей и не могу придумать как подобное сравнение грамотнее организовать.
Теплое с мягким сравнить без допущений не получится. На gpu вы будете использовать cuda ядра. В случае с phi там этих ядер нету в принципе. Поэтому с одинаковой архитектурой сравнения равноправного не будет сколько бы вы не игрались с параметрами.
источник

ME

Makhlov Egor in AI / Big Data / Machine Learning
undiabler
Теплое с мягким сравнить без допущений не получится. На gpu вы будете использовать cuda ядра. В случае с phi там этих ядер нету в принципе. Поэтому с одинаковой архитектурой сравнения равноправного не будет сколько бы вы не игрались с параметрами.
Спасибо
источник

M

Maxim Bogdanov in AI / Big Data / Machine Learning
Приветствую! Ищу датасет с реальными действиями (events) пользователей. Например, датасет онлайн-магазина, где действия могут быть "зашел на сайт", "поискал товар", "посмотрел товар", "кинул в карзину", "купил". Основные требования: датасет должен быть реальный, иметь timestamp, ключ по юзеру, ивентов должно быть хотя бы 10-20, записей должно быть хотя бы 100к-1млн, размазанных на период времени хотя бы в неделю-месяц (но желательно больше), у ивентов должны быть атрибуты (имя товара, цена, категория, чем больше всего, тем лучше).
Онлайн-магазин — как пример. Подойдёт датасет ивентов по любым тематикам, хоть это действия в мобильной игре, хоть в онлайн-кинотеаре. Главное, чтобы по ним можно было выстраивать простую аналитику типа воронок действий пользователей, когорт.

Либо может есть какой-нибудь генератор подобных вещей, но чтобы на выходе было хоть как-то правдоподобно.
Спасибо!
источник

M

Maxim Bogdanov in AI / Big Data / Machine Learning
Нашёл вот такой датасет: https://www.kaggle.com/mkechinov/ecommerce-events-history-in-cosmetics-shop Но там маловато ивентов (4) и все атрибуты сквозные (то есть у всех ивентов одни и те же атрибуты).
источник

M

Maxim Bogdanov in AI / Big Data / Machine Learning
В идеале конечно, чтобы юзеры совершали действия в течение какого-то долгого периода (неделя-месяц), то есть периодически заходили, совершали действия, уходили, чтобы можно было поглядеть на ретеншн.
источник

◇Сущ in AI / Big Data / Machine Learning
Dan • Captain
Вы не могли бы подсказать в каком контексте вы слышали что-то про ленточные нейронные сети? Страсть как любопытно уже второй день
Стоит задача сделать детектор объектов на фото на основе изначальной базы(100 объектов) и так, чтобы поступающие объекты на проверку приопозновании поступали в нейронку для дообучения, а если нейронка не знает объекта, то добавляла его к себе для дальнейшего распознавания.

Мой знакомый говорит о том, что с этой задачей справляется ленточные нейросети, которые использует тесла. Конечно же про нейросети Теслы нет информации, как и про ленточные.
источник

I

Ivan in AI / Big Data / Machine Learning
А ваш знакомый может дать ссылку на источник, где он обнаружил эти сети?
источник

I

Ivan in AI / Big Data / Machine Learning
◇Сущ
Стоит задача сделать детектор объектов на фото на основе изначальной базы(100 объектов) и так, чтобы поступающие объекты на проверку приопозновании поступали в нейронку для дообучения, а если нейронка не знает объекта, то добавляла его к себе для дальнейшего распознавания.

Мой знакомый говорит о том, что с этой задачей справляется ленточные нейросети, которые использует тесла. Конечно же про нейросети Теслы нет информации, как и про ленточные.
А как нейронная поймёт, что объект надо добавить для дальнейшего распознавания, если она не знает, что это за объект?
источник