Ivan Begtin
8.03K subscribers
1.75K photos
3 videos
101 files
4.45K links
I write about Open Data, Data Engineering, Government, Privacy, Digital Preservation and other gov related and tech stuff.

Founder of Dateno https://dateno.io

Telegram @ibegtin
Facebook - https://facebook.com/ibegtin
Secure contacts ivan@begtin.tech
Download Telegram
Пока в России принимают по 700 законов в год, в мире тренд на CrowdLaw [1], написание законов экспертами и вовлечёнными гражданами.

И, чтобы быть честными, этот тренд давний. В России краудсорсинг законов взлетал в 2012 году, упал к 2014 году и не по той причине что он не работал, а по той причине что он работал слишком хорошо.

Реорганизация нормотворчества для государства - это принятие самоограничений, отказ от волюнтаризма и принятие факта с помощью правильной организаци и технологий эксперты пишут законы лучше чем профессиональные нормотворцы.

А пока изучаем материалы которые коллеги из The GovLab собирают по CrowdLaw в мире.

Ссылки:
[1] https://crowd.law

#opendata #crowdlaw
Для тех кто любит работать с данными, но всё что касается государственных данных надоело и вообще хочется быть поближе к технологиям и исследованиям подборка ссылок.
GHTorrent [1] - база всего что есть в открытом доступе в Github'е собранное через их открытое API. Распространяется в виде дампов в MySQL и MongoDB, по 70 гигабайт каждый дамп

DNSCensus [2] - огромная база DNS записей на 2013 год, более 2.5 миллиардов записей объёмом в 157 гигабайт.

911Datasets [3] коллекция наборов данных по теме терракта 11 сентября 2001 года в США.

Wikimedia Dumps [4] - десятки терабайт дампов Википедии и других проектов Викимедии

LibGen Torrents [5] более миллиона научных книг через торренты

Archive.org datasets [6] коллекции наборов данных загруженные в Интернет-архив

Academic Torrents [7] более 25 терабайт научных данных раздаваемых через торренты

Ссылки:
[1] http://ghtorrent.org/
[2] https://dnscensus2013.neocities.org/index.html
[3] http://911datasets.org/index.php/Main_Page
[4] http://libgen.io/libgen/repository_torrent/
[5] https://meta.wikimedia.org/wiki/Data_dump_torrents
[6] https://archive.org/search.php?query=datasets
[7] http://academictorrents.com

#opendata #datasets
Forwarded from Ах, этот Минфин (Olya Parkhimovich)
2/3 налоговых преференций достаются людям с высоким достатком (с) А.Г. Силуанов, Расширенное заседание коллегии Минфина России
В выступлениях публичных лиц важно не только то что они говорят и упоминают, не менее важно то что онине упоминают в своих речах. При всех моих похвалах открытости финансового блока органов государственной власти в России - это не совсем так.

Яркий пример, выступление Антона Силуанова [1] на расширенной коллегии Минфина России. В его довольно продолжительной и, по многим вопросам, детальной речи не нашлось места словам про открытость и прозрачность и государства вцелом и Министерства Финансов и его структур в частности.

Печальный вывод из этого события в постепенном смещении приоритетов, не у всех, но у некоторых органов власти. Также как и в публично озвучиваемых целях Федерального Казначейства тематика прозрачности государства перестала использоваться [2].

Это, в любом случае, не столь удручающая картина как во многих органах власти категорически избегавших любых тем открытости все последние годы, но даже на таких ранних стадиях вызывает опасения.

Будем надеяться что необоснованные.

Ссылки:
[1] http://government.ru/news/31837/
[2] http://www.roskazna.ru/inaya-deyatelnost/otkrytoe-pravitelstvo/publichnaya-deklaratsiya-fk.php

#opendata #opengov
Center of Public Impact [1] опубликовали доклад "Finding more Human Government" в рамках проекта "Finding legitimacy" [3].

Доклад состоит из сборника вопросов и ответов с примерами того какими должны быть государственные проекты повышающие доверие между гражданами и теми кто принимает решения.

Тут важно обратить внимание на акценты. Finding more Human Government - это поиски более "человечного" государства. В погоне за эффективностью, технологизацией, платформенными и другими техническими решениями человечность не обретается. В лучшем случае её можно сохранить, но есть риски и потерять человечность окончательно.

Ссылки:
[1] https://www.centreforpublicimpact.org
[2] https://publicimpact.blob.core.windows.net/production/2018/03/CPI-Finding-a-more-Human-Government1.pdf
[3] https://www.centreforpublicimpact.org/becoming-human-government-five-behaviours-greater-legitimacy/

#opendata #opengov #humangov
Forwarded from Ах, этот Минфин (Olya Parkhimovich)
Forwarded from Ах, этот Минфин (Olya Parkhimovich)
10 фактов о ТОП-97 федеральных субсидий за 2018 год

0. Субсидии - это одна из форм предоставления денег из бюджета, при которой финансирование получается напрямую, без объявления тендера. Федеральные субсидии публикуются Минфином России на портале Электронного бюджета: rs.budget.gov.ru. Региональные субсидии в машиночитаемом формате не публикуются.

1. ТОП-97 субсидий - это 825 миллиардов рублей из федерального бюджета. Для сравнения, весь объем гос. контрактов за тот же период на федеральном уровне - 297 млрд рублей.

2. Каждая субсидия в ТОП-97 больше 3 млрд рублей. Получили эти субсидии 88 организаций. Большинство из них получили по одной, 3 организации получили по 2, Минфин Крыма получил 6.

3. Среди получателей 4 банка (Газпромбанк, Российский Сельскохозяйственный банк, Сбербанк, Банк ВТБ). Банки получают субсидии от Минсельхоза России.

4. 8 субсидий Роспечать выделило на СМИ - газеты, телевидение (напомню, что это ТОП-97 по всем субсидиям, включая строительство, дороги и прочее).

5. ТОП-5 субсидий: Госкомпания "Российские автомобильные дороги" (86 млрд руб.), ВГТРК (62 млрд руб.), Минэкономики Калининградской обл. (50 млрд руб.), ОАО "РЖД" (37 млрд руб.), Минфин Крыма (30 млрд. руб).

6. В ТОП-10 субсидий входят три СМИ. Упоминавшийся выше ВГТРК (62 млрд руб.), МИА "Россия сегодня" (20 млрд руб.), АНО "ТВ-НОВОСТИ" (19 млрд руб.).

7. Минздрав России выдает субсидии не только региональным Минздравам, но и региональным Министерствам строительства. При этом Минстрой России региональным Минздравам субсидии не дает.

8. ТОП-5 распределителей субсидий: Роспечать (129 млрд руб.), Минэкономразвития (113 млрд руб.), Минтранс (111 млрд руб.), Росжелдор (49 млрд руб.), Минсельхоз (46 млрд руб.).

9. Если сложить средства, распределяемые Росжелдором, Минсельхозом и Минобрнауки, то получится примерно столько же, сколько субсидии от Роспечати на СМИ.

10. Минфин России ни одной субсидии больше 3 млрд рублей за 2018 год не выдал.

Еще раз уточню, что все подсчеты касаются только ТОП-97 субсидий. И немного поспойлерю: скоро мы будем изучать их намного подробнее для одного проекта ;-)

#ОткрытыеГосфинансы
Я наконец-то не поленился и выложил 11 своих презентаций на Slideshare [1]

Это часть презентаций за 2015-2017 годы, значительная часть про открытость финансовых данных, но не только о них.

Всего у меня за 9 лет накопилось более 300 презентаций с которыми я когда-либо выступал или направлял их, часть из них всё ещё актуальны, но некрасивы, стыдно их показывать;) Часть уже устарели. Постепенно все полезные выкладываю.

P.S.
Slideshare забанен Роскомнадзором в России и доступен только тем кто пользуется VPN'ами

[1] https://www.slideshare.net/ivbeg

#opendata #opengov
Дмитрий Медведев подписал распоряжение "О бюджетных ассигнованиях на реализацию первоочередных мероприятий программы «Цифровая экономика Российской Федерации» " [1].
В нём закреплено выделение 3,04 миллиардов рублей в следующем раскладе:
- 505 млн. руб Росатому на исследовательские компетенции
- 1604 млн. руб. Минсвязи на инфраструктуру
- 3 млн. руб - ФСБ России, инфраструктура
- 15 млн. руб Минстранс, инфраструктура
- 15,5 млн. руб Минэкономразвития, инфраструктура
- 134 млн. руб Управлению делами Президента для субсидии Аналитическому центру при пр-ве РФ
- 399,6 млн. руб Росреестру на инфраструктуру
- 350 млн. руб Минкомсвязи на инфобез
- 13,6 млн. руб Минпромторгу на инфобез

Итого:
- 64% (1954 млн. руб) в Минкомсвязь
- 16,6% (505 млн. руб) в Росатом
- 13% (399,6 млн. руб) в Росреестр
- 4,4% (134 млн. руб) в Аналитический центр при пр-ве
Все остальные около 2% от общей выделенной суммы

Прямая ссылка на документ [2], там есть указания на конкретные мероприятия.

Часть расходов будет достаточно прозрачна и их можно будет отслеживать на закупках, например, через Госзатраты [3]. Часть идущая на аналитический центр при пр-ве будет не столь очевидн, АНО, в статусе которого находится центр выпадает из требований 44-ФЗ и 223-ФЗ и раскрывает лишь малую часть закупок на добровольной основе. Но надо отдать должное, это менее 4,5% выделяемых средств.

Ссылки:
[1] http://government.ru/docs/31894/
[2] http://static.government.ru/media/files/aqrGeWIr4N7FhERxWr92sNB9E080xmAU.pdf
[3] http://clearspending.ru

#opendata #opengov #spending
На программу деятельности федерального государственного бюджетного учреждения "Национальный исследовательский центр "Курчатовский институт" на 2018 - 2022 годы, правительство определило 172,9 миллиардов рублей [1] что утверждено распоряжением Правительства Российской Федерации от 24 марта 2018 г. № 502-р

Программа включает,в том числе, такие пункты как:
...
Будут созданы технологические решения системообразующего характера для формирования цифровой экономики в Российской Федерации.
...
и многие другие.

Объём программы сопоставим с федеральными целевыми программами за прошлые годы [2]. К сожалению, новый портал госпрограмм Programs.gov.ru [3] не работает, не открывает карточки отдельной программы и поэтому сложно сравнить с новыми госпрограмами, но и по сравнению со старыми - объём финансирования более чем значительный. Его детализация в тексте распоряжения правительства [4]


Ссылки:
[1] http://government.ru/docs/31892/
[2] http://fcp.economy.gov.ru/cgi-bin/cis/fcp.cgi/Fcp/FcpList/Full/2018
[3] http://programs.gov.ru/
[4] http://static.government.ru/media/files/D0Cd1k4VUcLZp4PB9TGmtNuCOy9I54gv.pdf

#government #finances #курчатовский
Открытые данные не помогают в том что государства и крупные коммерческие компании следят за гражданами, но помогают гражданам следить за государством и крупным бизнесом.

Из набора данных о поездках такси в Нью Йорке, ранее опубликованном дептрансом города, активисты выяснили [1] заметный поток такси в период заседания ФРС и банками.


Ссылки:
[1] https://news.uchicago.edu/article/2018/03/06/nyc-taxi-ride-data-suggest-cozy-relationship-between-big-banks-and-fed

#opendata #opengov #taxi
Cloudflare запустили универсальный DNS [1] публичный сервис с API и, по некоторым замерам [2], быстрее аналогов, Google / Quad9 / OpenDNS.
Обещают заботиться о приватности и всячески её обеспечивать.

Хорошая новость в том что к публичным сервисам добавился ещё один. К тому же Cloudflare это одна из немногих публичных IT компаний публикующих Transparency Report [3].

Не столь хорошая новость в том что Cloudflare, наряду с Amazon'ом и ещё рядом компаний становятся одним из ключевых инфраструктурных игроков Интернет'а.

Падение их инфраструктуры, утечка информации или взлом приведут к катастрофическим последствиям.

А в качестве дополнения напомню что не вредно свои DNS запросы обрабатывать самостоятельно на локальном сервере. Рекомендую сервера unbound [4] и Technitium DNS [5].

Они, как и другие, self hosted [6] решения - это разумная альтернатива облачным сервисам для тех кто озабочен личной приватностью.

И, конечно же, важно не забывать что государство стоит последним в списке тех кто следит за людьми. На первом месте всегда те кто умеет монетизировать эту информацию.

Об этом же, с хорошими иллюстарациями, свежая статья в India Today "The end of privacy" [7] о том как это устроено у них.

Отдельно отмечу, что в России тема приватности граждан выпадает из повестки. Коллеги из Роскомсвободы [8] [9] ведут неравный бой с Роскомнадзором и , а Общество защиты интернета [10] имеет изначально политическую природу, вернее, будет классифицироваться как политическое органами власти в виду организаторов в лице руководителя штаба А. Навального. При том что надо отдать им должное, их исследование сотовых операторов [11] довольно интересно.

В то же время классические общества защиты прав потребителей в России не обрели цифровой повестки и защитой цифровых прав не занимаются.

И здесь есть неприятная развилка в том что чтобы защищать цифровые права граждан в сети нужно иметь рычаг давления на корпорации в лице государства и наоборот, для давления на государство, нужен рычаг давления, в том числе через корпорации, объясняющие все проблемы кривого регулирования.

Эта не единственная, но не последняя развилка являющаяся следствием проблемности регулирования Интернета в России на сегодняшний день.

Ссылки:
[1] https://blog.cloudflare.com/announcing-1111/
[2] https://medium.com/@nykolas.z/dns-resolvers-performance-compared-cloudflare-x-google-x-quad9-x-opendns-149e803734e5
[3] https://www.cloudflare.com/transparency/
[4] https://unbound.net/
[5] https://technitium.com/dns/
[6] https://github.com/Kickball/awesome-selfhosted
[7] https://www.indiatoday.in/magazine/cover-story/story/20180409-indian-user-personal-data-leak-bjp-congress-data-leak-aadhaar-facebook-1201189-2018-03-29
[8] https://roskomsvoboda.org
[9] https://publielectoral.lat/roskomsvoboda
[10] http://ozi-ru.org/
[11] https://roskomsvoboda.org/36953/

#opendata #privacy
Вышло распоряжение правительства от 23 марта 2018 года №481-р. "Об утверждении плана реализации Стратегии государственной политики в области защиты прав потребителей " [1]
Обратите внимание на пункт 21:
—-
Разработка и утверждение концепции поэтапного создания и развития новой цифровой платформы для потребителей на
базе государственного информационного ресурса в области защиты прав потребителей, качества и безопасности товаров, работ и услуг(далее - концепция создания цифровой платформы для потребителей), предусматривающей создание в том числе
информационных сервисов для потребителей, направленных на решение типичных жизненных ситуаций, получение полной информации из государственных и иных ресурсов о лицензиях, разрешениях, документах о подтверждении соответствия продукции (работ, услуг), о воздействии товаров на здоровье человека и иной потребительской информации с учетом исключения дублирования функций существующих коммерческих сервисов
—-
и на другие пункты в разделе "III. Развитие информационных ресурсов в сфере защиты прав потребителей и альтернативных механизмовразрешения споров, содействие просвещению и образованию потребителей".

Полный текст по ссылке [2]

Ссылки:
[1] http://government.ru/docs/31808/
[2] http://static.government.ru/media/files/b8LZ4vj5dxMOZjj8v43H6bXaqABaw5nG.pdf

#opendata #opengov #digitalgov
В рубрике "как это работает у них" о том как устроены открытые данные во Франции.
Во Франции действует портал data.gouv.fr [1] где, в общей сложности, на апрель 2018 года опубликовано 33978 наборов данных [2] от 1418 [3] организаций и 1722 примеров использования данных [4].

Кроме того на портале зарегистрировано 25 537 пользователей, 144 тысячи ресурсов к данным опубликованных пользователями и идёт 2 015 дискуссий [5]. В количестве пользователей и есть ключевая особенность портала. В отличие от многих других проектов порталов открытых данных в мире, он основан на французском движке udata [6] который с самого начала ориентирован на социальное взаимодействие и реализован как социальная платформа.

Платформа позволяет очень удобно добавлять примеры использования наборов данных прямо на карточке набора данных. Например, один из наиболее востребованных наборов данных это результаты выборов 2012 года используется в 13 работах [7], а самый востребованный - это данные по демографии с детализацией до муниципального района (департамента) [8].

Отдельно обратите внимание что на государственном портале публикуются не только открытые данные государства, но и OpenStreetMap [9] и других сообществ работающих с открытыми данными во Франции, таких как Open Food Facts [10]. Государство выступает не только как публикатор данных и регулятор, но и как лидер.

Ссылки:
[1] http://data.gouv.fr
[2] https://www.data.gouv.fr/en/datasets/
[3] https://www.data.gouv.fr/en/organizations/
[4] https://www.data.gouv.fr/en/reuses/
[5] https://www.data.gouv.fr/en/dashboard/
[6] http://udata.readthedocs.io/en/stable/
[7] https://www.data.gouv.fr/en/datasets/election-presidentielle-2012-resultats-572126/
[8] https://www.data.gouv.fr/en/datasets/population/
[9] https://www.data.gouv.fr/fr/organizations/openstreetmap/
[10] https://www.data.gouv.fr/en/organizations/open-food-facts/

#opendata #opengov #france
За последние 13 лет в России появились значительные объёмы данных в открытом доступе и на их фоне гораздо меньше разговоров о том что же из открытого доступа исчезло. А такие данные есть и их немало, один из ключевых исчезнувших и ограниченных источников информации - это реестр государственного имущества на сайте Росимущества. [1]

В 2008 году Эльвира Набиуллина подписала приказ о раскрытии на сайте Росимущества информации о государственном имуществе в довольно подробной форме [1]. Например, только по космическим объектам эти данные включали:
—-
78. Реестровый номер федерального имущества (РНФИ).
79. Место запуска (космодром).
80. Дата запуска.
81. Центр управления полетом.
82. Дата посадки.
83. Наименование.
84. Назначение.
85. Правообладатель.
86. Документы - основания возникновения (основные реквизиты
правоудостоверяющих документов) права собственности Российской
Федерации, иного вещного права.
87. Стоимость (тыс. руб.): первоначальная; остаточная или
наименование иного вида стоимости.
88. Документы - основания изъятия из оборота, ограничения
оборота.

Ограничение (обременение)
89. Наименование части.
90. Вид ограничения (обременения).
91. Дата возникновения.
92. Дата прекращения.
93. Лицо, в пользу которого установлено ограничение
(обременение).
—-

Но, в 2016 году, Алексей Улюкаев подписал другой приказ [3], заменивший предыдущий и убравший из публичного доступа всю информацию о качественных характеристиках имущества и привязку к реквизитам правообладателя.
На примере того же космического объекта осталось лишь два поля:
16. Реестровый номер федерального имущества (РНФИ).
17. Наименование.

То же самое касается и всех остальных объектов государственного имущества. Объём публикуемых данных сократился многократно.

Ссылки:
[1] http://rosim.ru
[2] http://pravo.gov.ru/proxy/ips/?docbody=&nd=102127487&rdk=&backlink=1
[3] http://pravo.gov.ru/proxy/ips/?docbody=&prevDoc=102127487&backlink=1&nd=102401022&rdk=

#opendata #opengov #rosim
Я давно не делал обзор каналов про данные в телеграме. Кроме моего канала, который я стараюсь вести в очень субъективном формате есть многие кто пишут о данных и открытых данных.

Каналы о данных и их визуализации
@urbandata - Андрей Кармацкий, о данных в применении к городу
@data_publication - Андрей Дорожный, о визуальной журналистике
@ahminfin - Ольга Пархимович пишет о данных Минфина, Федерального Казначейства и других финансовых данных
@dataplace - Ирина Радченко, пишет о инструментах
@mapporn - визуализации на картах
@Persdata - в целом новостной канал по персональным данным

А также несколько дополнительных каналов работающих на базе @FeedRetranslatorBot который ретранслирует RSS ленты и новости с сайтов где нет RSS лент в каналы:
@infoculture - канал Инфокультуры, собирает новости со всех наших проектов. Обновляется нечасто
@opengovdigest - канал с новостями по Открытости Государства

Если Вы знаете интересные каналы про данные и всёс ними связанное - пишите мне в @begtinchat и я добавлю их в регулярные обзоры

#opendata #opengov
Переподтверждение открытости, то чего нехватает нынешнему (и приходящему) Правительству. В декабре 2017 года в Великобритании премьер-министр направил специальное письмо [1] подтверждающее приверженность к принципам открытости данных и продолжение публиковать их на постоянной основе.

Ссылки:
[1] https://www.gov.uk/government/publications/letter-from-the-prime-minister-on-government-transparency-and-open-data

#opendata #opengov
А вот это, пожалуй, именно то что меня лично более всего раздражает в блокировках сайтов. Это этический вопрос - я считаю что пропаганда криминальной субкультуры должна быть остановлена, но депутаты, сложно представить, но против.
Forwarded from Roskomsvoboda
Криминальную субкультуру «АУЕ» не хотят запрещать в Госдуме

➡️ https://roskomsvoboda.org/37699

Комитет Госдумы по безопасности и противодействию коррупции рекомендовал отклонить проект о запрете пропаганды криминальной субкультуры. Это уже второй парламентский комитет, выступивший против цензурирование криминального контента в Сети. Ранее инициативу сенатора Антона Белякова не поддержал комитет Госдумы по вопросам семьи, женщин и детей. Также отрицательный отзыв законопроект получил от Правового управления ГД, и даже одиозный депутат Ирина Яровая высказалась против, назвав законопроект Белякова избыточным.

о_О
Вышло постановление Правительства от 31 марта 2018 года №390 [1] [2] об изменениях в порядке раскрытия информации в сфере теплоснабжения, водоснабжения, водоотведения, обращения с твёрдыми коммунальными отходами.

В этот раз ничего не скрывается и, наоборот, много новых данных будет публиковаться и федеральным регулятором и регулируемыми субъектами на их сайтах и в системе ФГИС ЕИАС [3]

Из того на что стоит обратить внимание:
- регламент доступа к общедоступным данным ФГИС ЕИАС не описан как и процедура раскрытия информации из этой государственной информационной системы;
- прописаны процедуры публикации информации из ФГИС ЕАИС на сайты органов местного самоуправления
- в документе активно используется новый термин "унифицированные структурированные открытые форматы", а также вводится термин "Стандарт раскрытия"
- как и во многих других механизмах интеграции ФГИСов - ничего нет про СМЭВ.
- нигде и никак не упоминаются открытые данные (привет "Открытому правительству" которое, по ходу, забило нормативно-правовую работу);

Итого хорошего: больше данных будет публиковаться
Итого плохого: тема открытых данных "Открытым правительством" была потеряна и продолжается теряться

Глобально идея открытости государства и открытых данных в России требует полного перезапуска. И с данными куда больше понятно как это сделать.

Ссылки:
[1] http://government.ru/docs/31941/
[2] http://static.government.ru/media/files/PVLkzxIKEzyrRGh4faQsmnY4CePE9AI5.pdf
[3] http://www.eias.ru/

#opendata #opengov