Рубрика "Циничный репортаж"
Начинаю репортаж в реальном времени о давно ожидающемся эпохальном событии - открытии Портала открытых данных РФ.
Я буду проверять статус открытости портала в моменты времени, обозначенные в опросе, вывешенном вчера, и давать апдейты.
Момент № 1 - начало суток 15.07.2025. Портал не открыт
Момент № 2 - в Москве 7 часов утра (мне не спалось). Портал в ад открытых данных РФ открылся!
Анализировать, что там есть на портале, я пока не буду - в России есть (всё ещё) много экспертов по открытым данным, которые сделают это лучше меня. А я пока цинично понаблюдаю, не закроется ли портал внезапно (тм) обратно.

Рубрика "Циничный репортаж"
Всё-таки не удержался - пошел посмотреть на "Портал ОД".
На картинке мой диалог с Ади Оди - это, видимо, портальный недо-ИИ.
Сначала я нажал кнопочку "Открытые данные" из типовых запросов - ответ прекрасен!
Потом я нажал кнопочку "Нормативная база" - ответ подкупил своей свежестью.
Потом я просто спросил - Оди, видимо, решил, что нет смысла продолжать со мной диалог и просто проигнорировал мой вопрос

А помните - неделю назад я вывешивал угадайку про цитату:

Угадайте, о каком это веб-ресурсе:
«Инструмент позволяет анализировать бюджетные расходы и дает возможность оценки эффективности реализации федеральных программ, а также использовать полученные данные для разработки качественных инноваций во всех сферах»

Выбравшие какой-нибудь из вариантов ответа могли увидеть, что правильный ответ относится как раз к "Порталу ОД", а авторство цитаты принадлежит координатору «Деловой России» в СЗФО Дмитрию Панову, удостоившемуся чести побывать на "предпоказе" портала для для представителей бизнеса, науки и экспертов.
Ну так вот - на "портале Оди" (пожалуй, я дальше так буду называть это недоразумение "про открытость") действительно есть данные Федерального Казначейства (именно оно отвечает - точнее, отвечало раньше, пока не самоустранилось от этой отвественности 3 года назад, - за публикацию сведений об исполнении федерального бюджета) - аж (наберите побольше воздуха в легкие, как любил говорить наш сатирик про тупых американцев М.Задорнов) за 2014 (sic!) год

Извините - не могу удержаться.
В Росмолодежи открытые данные создавались еще 55 лет назад - когда еще и Росмолодежи не было. А был Всесоюзный Ленинский Коммунистический Союз Молодежи

Без слов...

Как многие уже знают Минэкономразвития РФ открыли вновь портал открытых данных РФ data.gov.ru после более чем 2-х летнего отключения. Мне много что есть сказать про то как он сделан, что на нём опубликовано и что со всем этим далее делать.

Однако, прежде чем обо всём этом писать, давайте я помогу тем кто хочет провести собственный анализ и поругать/похвалить портал.

Поэтому для всех желающих публикую данные о данных, дампы метаданных о датасетах, организациях и нормативной базе опубликованных на портале. Они присоединены в формате Parquet к этому посту. Проще всего воспользоваться инструментами вроде DuckDB, Polars, Pandas чтобы их прочитать.

А также дампы всех датасетов и всех документов "нормативной базы" опубликованных на портале на 15 июля 2025 г.

Они доступны по ссылкам:
- datagovru_datasets_files.zip - файлы наборов данных, 102MB в сжатом виде, 1GB в распакованном, всего 5696 файлов в формате CSV
- datagovru_acts_files.zip - файлы нормативной базы, 77MB в сжатом виде, 97MB в распакованном виде, всего 80 файлов в формате PDF

Всё вместе, включая Parquet файлы, доступно для выгрузки по ссылке и в посте в телеграм.

На случай если сотрудники/подрядчики Минэка РФ захотят замести следы, внезапно что-то удалить внести исправления к опубликованному.

Объёмы небольшие, каждый может скачать эти данные локально, сделать собственную аналитику и рассказать о интересных находках.

Пока, для оперативности публикую всё это здесь, позже уже оформлю как полноценный датасет с автоматически созданной документацией.

#opendata #russia #datasets

Сам себя не похвалишь - сидишь как дурак!

Угадайте, что будет, если нажать на название набора открытых данных в перечне

Та-дам-м!

«При разработке обновленного Портала исходили из необходимости создать удобное пространство, которое позволит эффективно работать с открытыми данными, в том числе будет иметь понятную навигацию. Для этого предусмотрен полнотекстовый поиск, который охватывает все разделы системы. Поставщики информации доступны в реестре с фильтрами по названию, типу организации, региону и другим параметрам. Наборы данных сопровождаются статистикой просмотров и скачиваний, возможностью фильтрации и выгрузки в машиночитаемых форматах. Помимо этого, постарались сделать Портал полезным с точки зрения наполненности именно качественными наборами данных, в том числе предусмотрен функционал направления запроса о подготовке и опубликовании востребованных данных, которые в настоящее время не представлены на портале», — прокомментировал Владимир Волошин

Выдающихся сжигателей бюджетных средств порталостроителей России нужно знать в лицо!
Следователям пригодится

Роскомнадзор, вставай! Мизулина, не спи!
Пришла беда - откуда не ждали!
Минэк запустил на своей инфопомойке открытых данных цифровую эротику без возрастного маркера!
PS. А исполнение гимна России в ответ на "щекотание" робоидиотика, по-моему, вообще тянет на статью УК!

Всё... Прибили робоидиотика Оди...
Не хихикает больше от щекотки. Ну и весь поиск рукожопы заодно положили.
Не забудем! Не простим!
Пепел Оди стучит в наших сердцах!