Size: a a a

AI / Big Data / Machine Learning 👮‍♂️ Protected by R2D2

2020 October 16

EZ

Evgenii Zheltonozhsk... in AI / Big Data / Machine Learning 👮‍♂️ Protected by R2D2
То наверное можно чото придумать
источник

I

Ilya in AI / Big Data / Machine Learning 👮‍♂️ Protected by R2D2
так, хорошо.
Какие могут быть самые уникальные случае кластеринга, когда алгоритм кластеринга дает 1 кластер. Пытаюсь понять методом исключения.
1.Если дата настолько неразличимая, то есть какое то абсолютно юнифор распределение.
2. Идейная ошибка в алгоритме.
3. Идейная ошибка пользователя алгоритма в гиперпараметрах, выбранной архитектуре и других настроек алгоритма.
источник

I

Ilya in AI / Big Data / Machine Learning 👮‍♂️ Protected by R2D2
tSNE
источник

EZ

Evgenii Zheltonozhsk... in AI / Big Data / Machine Learning 👮‍♂️ Protected by R2D2
Ilya
так, хорошо.
Какие могут быть самые уникальные случае кластеринга, когда алгоритм кластеринга дает 1 кластер. Пытаюсь понять методом исключения.
1.Если дата настолько неразличимая, то есть какое то абсолютно юнифор распределение.
2. Идейная ошибка в алгоритме.
3. Идейная ошибка пользователя алгоритма в гиперпараметрах, выбранной архитектуре и других настроек алгоритма.
Ну смотря какой алгоритм, многие принимают количество кластеров как параметр
источник

I

Ilya in AI / Big Data / Machine Learning 👮‍♂️ Protected by R2D2
Evgenii Zheltonozhskii🇮🇱
Ну смотря какой алгоритм, многие принимают количество кластеров как параметр
у меня не параметренный, сам находит.
Но был очень удивительный случай в процессе дебагинга этапов его этого процесса самонахождения количества кластеров, где даже kmeans закричал то ворнингом, что у него нет запрашиваемого количества кластеров. То есть там странное поведение.
на картинке хит мэп даты до нормализации и после.

то есть я в процессе делал типо снапшоты даты которая кластеризуется и пытался оценить k-means-ом хотя бы примерно че там внутри куда двигается и как, и кминс выдал такое, разок, был странно.
источник

I

Ilya in AI / Big Data / Machine Learning 👮‍♂️ Protected by R2D2
а процесс такой, что постепенно все проглатывается в один кластер.
А во всех кластерах доминируют сэмплы одного лейбла.

Вот мне и мерещится, то ли дата такая не кластеризуемая, хотя tSNE собирает в кучи разные лейблы. А кластеры не собирают.
источник
2020 October 17

I

Ilya in AI / Big Data / Machine Learning 👮‍♂️ Protected by R2D2
dbscan тоже выдает один кластер.
источник

АК

Андрей Копылов... in AI / Big Data / Machine Learning 👮‍♂️ Protected by R2D2
Всем привет)

Задача: Определить принадлежность точки произвольному N-угольнику.

Метод 1: Геометрический (трассировка лучей), при этом, чтобы избежать ошибок, нужно проводить 4 луча из точки и считать для каждого луча пересечения со всеми рёбрами N-угольника (деревьями).

Метод 2: Альтернативный. Выполнить заливку N-угольника значениями в двумерном массиве  (предполагается самый производительный алгоритм заливки) и в этом массиве проверять значение для точки, принадлежность которой определяем.

Вопрос: при каком количестве рёбер N и количестве проверяемых точек метод 2 окажется более производительным?

Кто может решить задачку?)
источник

AY

Alexey Yurasov in AI / Big Data / Machine Learning 👮‍♂️ Protected by R2D2
Андрей Копылов
Всем привет)

Задача: Определить принадлежность точки произвольному N-угольнику.

Метод 1: Геометрический (трассировка лучей), при этом, чтобы избежать ошибок, нужно проводить 4 луча из точки и считать для каждого луча пересечения со всеми рёбрами N-угольника (деревьями).

Метод 2: Альтернативный. Выполнить заливку N-угольника значениями в двумерном массиве  (предполагается самый производительный алгоритм заливки) и в этом массиве проверять значение для точки, принадлежность которой определяем.

Вопрос: при каком количестве рёбер N и количестве проверяемых точек метод 2 окажется более производительным?

Кто может решить задачку?)
А это не для графов задача?
источник

АК

Андрей Копылов... in AI / Big Data / Machine Learning 👮‍♂️ Protected by R2D2
Alexey Yurasov
А это не для графов задача?
По методу 1 да, графами решается.. Или что имеете ввиду?)
источник

D

Denisio in AI / Big Data / Machine Learning 👮‍♂️ Protected by R2D2
Андрей Копылов
Всем привет)

Задача: Определить принадлежность точки произвольному N-угольнику.

Метод 1: Геометрический (трассировка лучей), при этом, чтобы избежать ошибок, нужно проводить 4 луча из точки и считать для каждого луча пересечения со всеми рёбрами N-угольника (деревьями).

Метод 2: Альтернативный. Выполнить заливку N-угольника значениями в двумерном массиве  (предполагается самый производительный алгоритм заливки) и в этом массиве проверять значение для точки, принадлежность которой определяем.

Вопрос: при каком количестве рёбер N и количестве проверяемых точек метод 2 окажется более производительным?

Кто может решить задачку?)
это классическая задача в геодезии, решена уже давно и для выпуклых и для впуклых и для полигонов с самопересечениями и вырезами
источник

D

Denisio in AI / Big Data / Machine Learning 👮‍♂️ Protected by R2D2
гуглить по словам "point in polygon" - и библиотек и алгоритмов написано уже полно
источник

АК

Андрей Копылов... in AI / Big Data / Machine Learning 👮‍♂️ Protected by R2D2
Denisio
гуглить по словам "point in polygon" - и библиотек и алгоритмов написано уже полно
Спасибо 👍)
источник

КЧ

Кирилл Чертоганов... in AI / Big Data / Machine Learning 👮‍♂️ Protected by R2D2
Alexey Yurasov
А это не для графов задача?
Вам нравится решать задачи с помощью графов ?
источник

AY

Alexey Yurasov in AI / Big Data / Machine Learning 👮‍♂️ Protected by R2D2
Кирилл Чертоганов
Вам нравится решать задачи с помощью графов ?
У меня пока не получается, но интересно, особенно с возможностями распределенных вычислений
источник

D

Denisio in AI / Big Data / Machine Learning 👮‍♂️ Protected by R2D2
вышеуказанные задачи оч быстро работают даже на очень сложных полигонах, разхве что у вас миллиарды полигонов с миллиардами точек
источник

T

Timur in AI / Big Data / Machine Learning 👮‍♂️ Protected by R2D2
источник

T

Timur in AI / Big Data / Machine Learning 👮‍♂️ Protected by R2D2
Всем привет. Я кинул запрос в sentinelhub и получил картинку. Мне нжно ее как-то сохранить, кто-нибудь знает как это сделать?
источник

EZ

Evgenii Zheltonozhsk... in AI / Big Data / Machine Learning 👮‍♂️ Protected by R2D2
Timur
Всем привет. Я кинул запрос в sentinelhub и получил картинку. Мне нжно ее как-то сохранить, кто-нибудь знает как это сделать?
plt.imsave?
источник

T

Timur in AI / Big Data / Machine Learning 👮‍♂️ Protected by R2D2
Хоспади, сколько сил и времени... Спасибо)))
источник