Рубрика "Циничная ДИТовщина"
Когда федеральный ИТ-министр говорит, что не может повлиять на региональное ИТ-министерство, нарукожопившее и навязывающее всем несчастным, кого угораздило угодить под коронавирусные подозрения, мобильное приложение "Цифровой концлагерь" "Социальный мониторинг", это совсем не означает, что региональное ИТ-министерство крутое и независимое. Это, скорее, означает, что к региональному ИТ-министерству скоро могут прийти из другого федерального ведомства, которое не так трепетно относится к конституционным правам субъектов РФ.

"Максут Шадаев заявил «Известиям», что Минцифра не в силах повлиять на разработчиков программы, для того чтобы исправить все недочеты.
— Это не наше приложение, оно у нас нигде не проходило, это собственная инициатива Москвы. Оно разработано и функционирует за деньги города, является приложением регионального уровня. Поэтому мы им ничего поручить не можем, — признал министр.
Он также заверил «Известия», что на федеральном уровне распространять данное приложение по примеру Москвы власти не планируют."

ещё недавно РКН такой строчкой был.
Но вообще, любой гос давно уже в айти как токсичность  и неспособность  к решению коммерческих задач воспринимается

Что будет с ДИТ Москвы после пандемии?
anonymous poll

Ничего не будет – 67
👍👍👍👍👍👍👍 56%

Наградят сотрудников медалями/грамотами/наградным оружием – 36
👍👍👍👍 30%

Заменят Эдуарда Лысенко на ещё кого-нибудь – 8
👍 7%

Проверки ФСБ/МВД/Роскомнадзора, посадки и отставки – 6
👍 5%

Всех [без]ответственных внесут в американские/европейские люстрационные списки – 1
▫️ 1%

Расформируют и создадут новый орган с нуля – 1
▫️ 1%

👥 119 people voted so far.

если что я полу-гос;)

Так ты же в друзьях в ФБ с объектом опроса. ))

...Переименуют? Дабы разорвать смысловую отссылку к 6 и 7 кругам ада "Божественной комедии" Данте.

Можно было бы назвать их Департамент Социального Мониторинга, например

Департамент цыфового суверенитету

Канцелярия цифровизации сокращённо КЦ

Ку! 👍🏻

Эволюция человечества
0. Одни люди грабят других
1. Одни племена грабят другие
2. Одни города грабят другие
3. Страны грабят страны
4. Наднациональные объединения (ООН, ВТО, НАТО) грабят слабые страны
----------------------/Что-то сломалось/----------------------
5. Люди новая нефть
6. Данные о людях новая нефть
-------------------------<-Мы здесь->----------------------
7. Данные о собственных гражданах новая нефть!

В последние годы порталы открытых данных перестали быть чем-то новым и прорывным, в основном они все основаны на нескольких решениях: CKAN, DKAN, OpenDataSoft, Dataverse и они как выполняли так и выполняют ключевую функцию доставки данных конечным пользователям.  Иногда может показаться, а что же ещё может в них появиться? Так вот главное что может появиться, а новые сервисы доставки данных без порталов.  Это сервисы управления пакетами данных очень похожих на системы контроля версий или системы управления пакетами ПО в Unix.

Datahub.ioDatahub.io
Проект компании Datopian вышедшей из Open Knowledge Foundation. Основная его идея в том чтобы публиковать тщательно упакованные наборы данных в соответствии со стандартом Frictionless Data. Там не так много данных, но есть возможность публиковать свои наборы и есть возможность получать опубликованное там через API или утилиту командной строки "data". Каждый набор данных включает метаданные для интеграции их в свои системы.  Ориентирован на табличные данные. Адаптирован более всего под язык Python, но есть много примеров на разных языках.

Ссылка: https://datahub.io

Data Package Manager for R (DPMR)
Система управления пакетами для языка R. Также основана на стандарте Frictionless Data, но уже заточенный под конкретный язык

Ссылка: https://github.com/christophergandrud/dpmr

Octopub
Проект Института открытых данных по автоматизации подготовки и публикации наборов данных. Довольно давно находится в стадии Beta, но продолжает развиваться. Важный акцент делают на валидации данных, как минимум на уровне форматов

Ссылка: https://octopub.io

Data Retriever
Сервис и код по подготовке наборов данных и доступа к ним для языков Python и R. В основном ориентирован на исследовательские данные.

Ссылка: https://www.data-retriever.org/

Dolt
Можно сказать Git для данных. Не даёт данным упаковки, но даёт интерфейс похожий на систему контроля версий Git для обновления данных и поддержания их в актуальном состоянии.

Ссылка: https://github.com/liquidata-inc/dolt

Data Version Control (DVC)
Система управления версиями данных ориентированная на машинное обучение. Заточено под данные относительно большого объёма, достигло версии пререлиза 1.0 и активно развивается. Значительно заточено под облачное хранение, такое как AWS S3.

Ссылка: https://dvc.org/

Sno.Earth
Заточено под геоданные и табличные данные, основной стандарт по которому работает это GeoPackage на основе которого даёт возможность работать с данными как система версионирования.

Ссылка: https://sno.earth/

Quilt
Утилита от создателей портала QuiltData, раздающем петабайтный архив данных поверх инфраструктуры AWS. Четко ориентировано на работу с данными как с кодом. Заточено под табличные данные, но возможно пригодно и для других задач.

Ссылки: https://github.com/quiltdata/quilt
—

Это всё, безусловно, не полный список. Существует множество инструментов внутри корпоративных решений, есть продукты умеющие версионировать справочники, есть много подходов к упаковке исследовательских данных и, конечно, за пределами данных, есть множество инструментов создания пакетов с контентом в архивной среде.

#data #datapackages #opensource

Спасибо!

Спасибо тебе, добрый человек 🙏

Помогите блондинке. Как вы сохраняете информацию? Вот Иван сделал отличный пост и дал список чудесных книг и ссылок. Сейчас немедленно прочитать это не могу-сложно в языковом плане. Тема мне очень интересна. Смотрю на этот пост как на чистейший кусок золота и не знаю куда его сохранить? Пока придумала свой личный канал - важное и сохраняю туда. Может вы как-то по умному это делаете? Поделитесь, пожалуйста

Saved Messages в телеграмм

А можно прям вот, как собаке, "правой кнопкой жмешь туда" или скриншотом - где это?? 🥺

что на телефоне, что на десктопе при форварде Избранное первым пунктом идёт

Аа, нашла !!