Size: a a a

AI / Искусственный Интеллект

2019 May 13

VD

Valery Datsyuk in AI / Искусственный Интеллект
Yurii
Для работы программы, не? ) С большим объемом данных и макс скоростью)
все компьютерные решения для работы программ.
для разных типов данных, для разного воркфлоу свои хаки, поскольку мир неидеален.
источник

VD

Valery Datsyuk in AI / Искусственный Интеллект
Yurii
Для работы программы, не? ) С большим объемом данных и макс скоростью)
серебряной пули нет
источник

Y

Yurii in AI / Искусственный Интеллект
Valery Datsyuk
всё просто, если файл не помещается в оперативку, он будет тянуться с диска.  Файловые системы давно умеют кэшировать это.  Ты хочешь переложить то, что давно отработано на уровне ос, на БД, не представляя структуру своих данных.
Кэширование будет опять таки за счет оперативы и по законам данной ос а не как мне надо
источник

Y

Yurii in AI / Искусственный Интеллект
Valery Datsyuk
серебряной пули нет
У тебя на постгрес?
источник

VD

Valery Datsyuk in AI / Искусственный Интеллект
Yurii
Кэширование будет опять таки за счет оперативы и по законам данной ос а не как мне надо
как разработчики посчитали.
если не нравится их фаловое кэширование, можешь написать своё :)
источник

VD

Valery Datsyuk in AI / Искусственный Интеллект
Yurii
У тебя на постгрес?
смотря где.
в основном да, как долговременное хранилище
источник

Y

Yurii in AI / Искусственный Интеллект
Организация файлов типа json или txt не кактит? Многопоточность та же
источник

VD

Valery Datsyuk in AI / Искусственный Интеллект
Yurii
Организация файлов типа json или txt не кактит? Многопоточность та же
1) это медленнее,
2) тебе поиск не нужен?
3) в PG есть тип данных json
источник

Y

Yurii in AI / Искусственный Интеллект
Valery Datsyuk
1) это медленнее,
2) тебе поиск не нужен?
3) в PG есть тип данных json
Ну я читал что файлы могут быть быстрее ибо меньше надстроек всяких, если небольшие и их много.
источник

Y

Yurii in AI / Искусственный Интеллект
Скорость надо О(1) 😄
источник

IP

Ivan Petroff in AI / Искусственный Интеллект
тогда вам нужен вектор(массив) 😊
источник

VD

Valery Datsyuk in AI / Искусственный Интеллект
Yurii
Ну я читал что файлы могут быть быстрее ибо меньше надстроек всяких, если небольшие и их много.
файловые системы сейчас тоже бд используют для доступа к файлам, но там много чего нет.
можешь, конешно грепать файлы, но по скорости доступа к определённым записям будет сильно уступать БД с индексами
источник

Y

Yurii in AI / Искусственный Интеллект
Ivan Petroff
тогда вам нужен вектор(массив) 😊
Словарь.(хэш таблица) в питоне
источник

IP

Ivan Petroff in AI / Искусственный Интеллект
словарь это logN если я не ошибаюсь
источник

Y

Yurii in AI / Искусственный Интеллект
Ivan Petroff
словарь это logN если я не ошибаюсь
Эт про питон
источник

IP

Ivan Petroff in AI / Искусственный Интеллект
Yurii
Эт про питон
имею ввиду сложность О(log(N))
источник

VD

Valery Datsyuk in AI / Искусственный Интеллект
Yurii
Эт про питон
на питоне можно только прототип, проверять идеи
источник

Y

Yurii in AI / Искусственный Интеллект
Так я не понял одного. Я могу норм работать с терабайтом например имея 128 гигов оперативы в redise?
источник

Y

Yurii in AI / Искусственный Интеллект
Valery Datsyuk
на питоне можно только прототип, проверять идеи
Ну да мб там си или еще как извращаться
источник

DB

Dmitry Belkevich in AI / Искусственный Интеллект
у нас вообще Delphi ;)
источник