Ну у меня сейчас идет процесс сделать delta lake from scratch. За полтора месяца ебли узнал что такое swarm, как его раскидывать на ноды, как делать оркестрацию. Можно было сделать все это в облаках в serverless, но хер там - клиент - стартап. Сегодня запустил SQLоболочку под спарк. Кто-то скажет, что это изипизилимонсквизи. Но бля, это мучительнобольноиприятно, когда хайв-метастор на отдельном контейнере и надо еще
delta.io либы подгружать. А поначалу когда это валится, это капец. С учетом, что не все хорошо гуглится - после маленькой победы охота бухнуть