Size: a a a

Doorways / conference /

2019 November 19

Б

Без печали in Doorways / conference /
Vladislav Ignatyev
сначала + 100%, потом скидки до 80%? 😁
😆 как всегда
источник

DL

Dmitry Lirik in Doorways / conference /
Maystrenko Viktor
В mysql кто силен?  Got timeout reading communication packets  такую фигню выдает
250к для sql в принципе - понты (если не тулишь в 1 ячнйку войну и мир 😀)
тут либо насторойки надо смотреть (крутить димиты)
либо сам запрос оптимиз.
либо уник столб оч. большой -какой тип ячейки там где уник?
источник

DS

Donald Space in Doorways / conference /
Maystrenko Viktor
Такое при примерно 250 000 записей (уникальный один столбик) В пустую таблицу все гуд получается.  Сервак не самый слабый.. 8 гиг оперативки.  Как-то можно такого избежать, но чтоб проверка на уникальность оставалась? А то переносить таблицы при достижении 200к какой-то адский костылище.
Попробуй проверять уникальность не всей ячейки, а её хэша. Новый столбец с индексацией. Или даже отдельная таблица "Индекс той записи - её хэш". Чем хэшировать чтобы быстро было - не подскажу, гуглить надо.
источник

s

stik.name in Doorways / conference /
да обычным md5 от данных
источник

J

John in Doorways / conference /
Мужики, поделитесь советом. Есть база с телефонными номерами клиентов. Хочу вытянуть у них фото с товаром, чтоб таким образом собрать фото-отзывы на товар.
Подскажите, каким софтом можно спарсить аккаунты инстаграма имея в наличии номера телефонов?
источник

MV

Maystrenko Viktor in Doorways / conference /
Dmitry Lirik
250к для sql в принципе - понты (если не тулишь в 1 ячнйку войну и мир 😀)
тут либо насторойки надо смотреть (крутить димиты)
либо сам запрос оптимиз.
либо уник столб оч. большой -какой тип ячейки там где уник?
bigint
источник

MV

Maystrenko Viktor in Doorways / conference /
Dmitry Lirik
250к для sql в принципе - понты (если не тулишь в 1 ячнйку войну и мир 😀)
тут либо насторойки надо смотреть (крутить димиты)
либо сам запрос оптимиз.
либо уник столб оч. большой -какой тип ячейки там где уник?
11111111111111111 типа так запись выглядит в ячейку
источник

n

nole in Doorways / conference /
John
Мужики, поделитесь советом. Есть база с телефонными номерами клиентов. Хочу вытянуть у них фото с товаром, чтоб таким образом собрать фото-отзывы на товар.
Подскажите, каким софтом можно спарсить аккаунты инстаграма имея в наличии номера телефонов?
позвони спроси
источник

DL

Dmitry Lirik in Doorways / conference /
хм, не работал никогда с ним, int юзаю, мож. есть смысл поменять на int и посмотреть?
ща глянул на свою бд - 1.4 млн. строк / 2 уник. ячейки - хавает 946 мб. озу
источник

MV

Maystrenko Viktor in Doorways / conference /
да я думаю что попробовать не INT - а тхт надо. Почему bigint поставил - потому что тут ID собираются, а они 15-17 значные.
источник

DL

Dmitry Lirik in Doorways / conference /
тогда лучше вообще varchar
источник

MV

Maystrenko Viktor in Doorways / conference /
да, попробую. И интересно количество потоков какое потянет... Сейчас проверю. Спасибо за советы
источник

DL

Dmitry Lirik in Doorways / conference /
15-17 int тоже хватит 😀
в него что-то около 2 млн. влазит кажись
источник

DL

Dmitry Lirik in Doorways / conference /
т.е. млрд.
источник

NK

ID:197152512 in Doorways / conference /
пепетка\-.*?
источник

NK

ID:197152512 in Doorways / conference /
В конце чем заканчивается html или php или \/
источник

F

Fyn in Doorways / conference /
Maystrenko Viktor
Такое при примерно 250 000 записей (уникальный один столбик) В пустую таблицу все гуд получается.  Сервак не самый слабый.. 8 гиг оперативки.  Как-то можно такого избежать, но чтоб проверка на уникальность оставалась? А то переносить таблицы при достижении 200к какой-то адский костылище.
Какая то ошибка, может конекшины не закрываешь или еще что-то. 250к записей с бигинт - это вообще ниочем, летать все должно
источник

MV

Maystrenko Viktor in Doorways / conference /
скорее всего с конекшенами и трабл - я кубиками зенковскими заливал. Моржет там нет закрытия сессии.  надо на шарпе по правильному написать будет.
источник

MV

Maystrenko Viktor in Doorways / conference /
именно в потоках проблемы.
источник

MV

Maystrenko Viktor in Doorways / conference /
то есть штук 100 потоков и ппц, когда таблица к 200к подходит - таймауты начинаются
источник