Size: a a a

2019 November 14

K

Kostya in sql_ninja
Какой-то Хмырь
Ну опера и под сиквел нужна будет. Можно, конечно, попообовать buffer pool extension на nvme, но я хз, хорошо лиэто
Дело в том, что кейс использования Вертики как бЭ намекает на то. что неплохо все витрины загнатьв  ОЗУ.
И еще - у Вертики лицензия по размеру БД была.
источник

K

Kostya in sql_ninja
Какой-то Хмырь
Ну опера и под сиквел нужна будет. Можно, конечно, попообовать buffer pool extension на nvme, но я хз, хорошо лиэто
Ну против хдд стандартных все хорошо
источник

K

Kostya in sql_ninja
Т.е. цена Вертики в вашем случае, елси витрины все -таки будут сильно больше 5Тб, мягко говоря, может неприятно удивить
источник

К

Какой-то Хмырь in sql_ninja
А опенсорсные решения есть?
Не дай бог, конечно, я просто для справки)
источник

K

Kostya in sql_ninja
Какой-то Хмырь
А опенсорсные решения есть?
Не дай бог, конечно, я просто для справки)
Наверху есть, валом
источник

K

Kostya in sql_ninja
т.е. средства визуализации
Но к ним полагается штат настройщиков и программеров :))) под собственные нужды
источник

K

Kostya in sql_ninja
Т.е. как делают - снизу каую-нить скоростную СУБД бесплатную
дата экстракт анд прочее - или апач айрфлоу или еще там кучка рядом
и сверху вроде пентаху можно прикрутить ...
источник

K

Kostya in sql_ninja
Но если потом все зп и скорсоть развертывания пересчитать и переложить на время-деньги ...
источник

K

Kostya in sql_ninja
ХЗ короче
источник

K

Kostya in sql_ninja
Если в запсе годик есть, можно рюхнуться, наеврное
источник

K

Kostya in sql_ninja
Но я так не делал никогда
источник

К

Какой-то Хмырь in sql_ninja
Понял, спасибо. И еще, я тае понимаю при консолидауии дпнных выгодно юзать polybase. Я пока про него не читал. В чем там разница с каким-нибудь ssis. Ну т.е. в ссис я могу перекачивать данные откуда угодно в сиквел. А в поли это как?
источник

K

Kostya in sql_ninja
Какой-то Хмырь
Понял, спасибо. И еще, я тае понимаю при консолидауии дпнных выгодно юзать polybase. Я пока про него не читал. В чем там разница с каким-нибудь ssis. Ну т.е. в ссис я могу перекачивать данные откуда угодно в сиквел. А в поли это как?
На самом деле, ссис вроде позволяет перекачивать данные откуда угодно куда угодно.
источник

K

Kostya in sql_ninja
Другое дело, если дестинейшн будет не скуль, вопрос, на сколько он эффективно это сделает по сравнению с другими решениями, остается открытым
источник

К

Какой-то Хмырь in sql_ninja
при построении DWH данные льются обычно непрерывным потоком или загружаются пачками? или по-разному бывает?
источник

IS

Igor Sergeichik in sql_ninja
потоком же не получится вроде как - их читать и обрабатывать когда-то надо
источник

К

Какой-то Хмырь in sql_ninja
мб что-то вроде гетерогенной репликации. golden gate там. я хз)
источник

IS

Igor Sergeichik in sql_ninja
ассоциативно только очереди приходят ни ум, и их разбор
но тут крайне не силён
источник

SN

Serge Nazarenko 💻 in sql_ninja
Какой-то Хмырь
ток заметил это сообщение. буду благодарен за аргументы против)
Против:
1. Каждый ТБ стоит денег. А т.к. объемы растут - решение по лицензиям будет стоить все больше и больше
2. Подходит только для перелопачивания больших обьемов. Т.е. точечные запросы к большим таблицам - очень медленно.
3. Нужен очень сильный архитектор для проектирования модели данных, иначе - будет тормозить, т.к. индексов как таковых нет, а с проекциями придется работать очень аккуратно. Сносно летит на modern подходах - DV, AM, но их надо уметь готовить - соответствующий тулинг.
4. Уровень SQL ниже плинтуса - ни тебе процедур, ни рекурсии, ни коррелированных запросов. В общем при кривой модели все будет тормозить.
5. удаление и апдейт не умеет, точнее умеет, но очень медленно.
источник

SN

Serge Nazarenko 💻 in sql_ninja
Плюсы: горизонтальное масштабирование, быстрые агрегаты, где-то 5х сжатие данных из коробки.
источник