Скачать презентацию Краудсорсинговые проекты в оценке населением качества государственных услуг Скачать презентацию Краудсорсинговые проекты в оценке населением качества государственных услуг

Болгов Краудсорсинг в оценке.ppt

  • Количество слайдов: 58

Краудсорсинговые проекты в оценке населением качества государственных услуг Болгов Радомир Викторович канд. полит. наук, Краудсорсинговые проекты в оценке населением качества государственных услуг Болгов Радомир Викторович канд. полит. наук, СПб. ГУ Санкт-Петербург,

Web 2. 0 Санкт-Петербург, 31 января 2018 2 Web 2. 0 Санкт-Петербург, 31 января 2018 2

Сходства между управлением бизнесом и государством в эпоху Web 2. 0 1) Инновации исходят Сходства между управлением бизнесом и государством в эпоху Web 2. 0 1) Инновации исходят от малых проектов на низовом уровне управления. 2) Обычные пользователи в роли разработчиков, а не только потребителей. 3) Свободное программное обеспечение. и т. д. Санкт-Петербург, 31 января 2018 3

n Краудсорсинг (crowd + outsourcing, «мудрость толпы» , «коллективный ум» ) – использование общественного n Краудсорсинг (crowd + outsourcing, «мудрость толпы» , «коллективный ум» ) – использование общественного ресурса (как правило, бесплатное) для производства товаров, услуг, идей и т. д. n Сферы применения краудсорсинга: выявление тенденций в настроениях общества, оценка качества услуг (в т. ч. государственных), вербовка новых сторонников (краудрекрутинг), сбор средств (краудфандинг), привлечение внимания общественности, разного рода координация n - Ограничения: толпа подвержена манипулированию, толпа неактивна, некомпетентна, неспособна сгенерировать ценную идею много хаотичных данных, неясно, кто несет ответственность Санкт-Петербург, 31 января 2018 4

Возможности краудсорсинга в госуправлении n n n n позитивный политический имидж за счет улучшения Возможности краудсорсинга в госуправлении n n n n позитивный политический имидж за счет улучшения взаимодействия с потребителями государственных услуг; позитивный управленческий имидж за счет внедрения современных управленческих технологий; создание банка инновационных и реалистичных идей; повышение качества нормативных и методических документов за счет результатов общественной экспертизы; формирование команды профессиональных и общественных экспертов; оптимизация сроков поиска новых решений и подготовки документов, имеющих принципиальное общественное и профессиональное значение; повышение эффективности бюджетных расходов за счет замены дорогостоящих профессионалов на коллективный разум. Санкт-Петербург, 31 января 2018 5

Методы 2. 0 n n n Visual Analytics Social Computing Data published on the Методы 2. 0 n n n Visual Analytics Social Computing Data published on the Web under an open licence Public Opinion-Mining & Sentiment Analysis Cloud Computing Feedback and reputation management systems Petition, Polling and voting Serious games Opinion mining Group Model Building Systems Thinking & Behavioural Modelling Санкт-Петербург, 31 января 2018 6

Бенчмаркинг в электронном правительстве 2. 0 n n n Д. Осимо (e. Practice, 2008): Бенчмаркинг в электронном правительстве 2. 0 n n n Д. Осимо (e. Practice, 2008): стадии транспарентности: - Информация отсутствует - Описание процедуры получения информации через свободу информации - Информация доступна в одноразовом, немашиночитаемом формате - Информация, имеющаяся в многоразовых и машиночитаемых форматах, таких как XML или DBase - Информация доступна и визуализирована с помощью определенных инструментов (georeferencing, гистограммы и т. д. ) Проекты оценивания: n n Open Budget Index Transparency league table of Farmsubsidy Санкт-Петербург, 31 января 2018 7

Бенчмаркинг в электронном правительстве 2. 0 n n n n 20 basic public data Бенчмаркинг в электронном правительстве 2. 0 n n n n 20 basic public data such as: beneficiaries of public funding (agriculture, EU structural funds, etc); draft legislation; planning applications; air pollution data MPs votes party donations citizens feedback / satisfaction surveys external consultancies Санкт-Петербург, 31 января 2018 8

Open Budget Index n n A. Not produced, even for internal purposes B. Produced Open Budget Index n n A. Not produced, even for internal purposes B. Produced for internal purposes, but not available to the public C. Produced and available to the public, but only on request D. Produced and distributed to the public (for example, in libraries, posted on the Internet. ) Санкт-Петербург, 31 января 2018 9

Transparency league table of Farmsubsidy Санкт-Петербург, 31 января 2018 10 Transparency league table of Farmsubsidy Санкт-Петербург, 31 января 2018 10

Тренды бенчмаркинга в госуслугах Фокус на результатах и влияниях n Выход за рамки правительственных Тренды бенчмаркинга в госуслугах Фокус на результатах и влияниях n Выход за рамки правительственных институтов n Стирание границ между внешней и внутренней политикой n Переход на низовой уровень n Отход от «паранойи ранжирования» n Санкт-Петербург, 31 января 2018 11

Традиционные инструменты е-бенчмаркинга: n Анализ контента сайта n Опрос пользователей n Фокус-группы n И Традиционные инструменты е-бенчмаркинга: n Анализ контента сайта n Опрос пользователей n Фокус-группы n И т. д. Новые инструменты е-бенчмаркинга: n Метрики сайта n Траффик, посещения, транзакции, n Необходима сравнительная оценочная метрика n Пользовательские инструменты (Google Analytics, Alexa. com) n IQ BUZZ, Babkee, Buzzlook и др. n Анализ мнений, эмоций, и т. д. n Платфома для бенчмаркинга: ‘dashboard’ n Вебкроулеры нового поколения n Автоматизированная оценка онлайн n Оценка электронной доступности n Карты, графы, таблицы (визуализация) Санкт-Петербург, 31 января 2018 12

Деятельность министерств и ведомств Германии в интеграции своих информационных систем с бизнесом и гражданами Деятельность министерств и ведомств Германии в интеграции своих информационных систем с бизнесом и гражданами Сайты gov 20. de, abgeordnetenwatch. de Платформы Profi, direktzu МВД: Online-Konsultation (2010) Санкт-Петербург, 31 января 2018 13

Деятельность министерств и ведомств Германии в интеграции своих информационных систем с бизнесом и гражданами Деятельность министерств и ведомств Германии в интеграции своих информационных систем с бизнесом и гражданами Direkt zur Kanzlerin – Задай вопрос канцеру Mein Amt - рейтинг ведомств Санкт-Петербург, 31 января 2018 14

Основные документы E-Government 2. 0 (2006): E-Solution Санкт-Петербург, 31 января 2018 15 Основные документы E-Government 2. 0 (2006): E-Solution Санкт-Петербург, 31 января 2018 15

Интернет-сервисы для общественного контроля: - над фирмами-загрязнителями окружающей среды (e. ANV) - за продуктами Интернет-сервисы для общественного контроля: - над фирмами-загрязнителями окружающей среды (e. ANV) - за продуктами питания (IT Food Trace) - за парковкой автомобилей чиновников -за госзакупками Сервисы для сообщения гражданами о проблемах местной инфраструктуры: Maerker (Бранденбург), Unortkataster (Кельн) Санкт-Петербург, 31 января 2018 16

К. -Т. цу Гуттенберг Санкт-Петербург, 31 января 2018 17 К. -Т. цу Гуттенберг Санкт-Петербург, 31 января 2018 17

Россия Санкт-Петербург, 31 января 2018 18 Россия Санкт-Петербург, 31 января 2018 18

Rettet den Volkentscheid! Сохраним референдум! (Гамбург, 2007) Санкт-Петербург, 31 января 2018 19 Rettet den Volkentscheid! Сохраним референдум! (Гамбург, 2007) Санкт-Петербург, 31 января 2018 19

Проект E-Participation Government 2. 0 in Beta phase (2010): -определяющими факторами для населения являются Проект E-Participation Government 2. 0 in Beta phase (2010): -определяющими факторами для населения являются простота использования и удобство е-услуг, а также безопасность и личная секретность, -Главные препятствия ограниченные ресурсы бюджета, отсутствие знаний и консервативность сотрудников. Санкт-Петербург, 31 января 2018 -Только 0, 5% от всех 14, 000 муниципалитетов Германии внедрили планирование бюджета с веб-участием граждан - В 60% городов и 31% федеральных земель граждане могут подавать жалобы. Тем не менее, менее чем в 10% всех случаев это имеет результат. 20

Проект E-Participation n n Web-участие граждан в городском планировании: 58% сайтов крупнейших городов Германии Проект E-Participation n n Web-участие граждан в городском планировании: 58% сайтов крупнейших городов Германии предоставляют возможность комментировать законопроекты, но только на 6% сайтов можно проводить виртуальные опросы Web-участие граждан в планировании бюджета: сегодня в на сайтах 40% городов Германии бюджет доступен онлайн. На сайтах 60% городов существуют онлайн-формы для предложений по бюджету, у 20% есть специальные платформы 2. 0 для предложений по бюджету. Но только 1 город предоставляет гражданам возможность голосовать за бюджет. Санкт-Петербург, 31 января 2018 21

Использование Web 2. 0 на сайтах властей городов и федеральных земель Германии Источник: Government Использование Web 2. 0 на сайтах властей городов и федеральных земель Германии Источник: Government 2. 0 in Beta phase. CSC, 2010. Санкт-Петербург, 31 января 2018 22

Государство 2. 0 в Канаде n n В соответствии с Canadian Internet Survey (2007), Государство 2. 0 в Канаде n n В соответствии с Canadian Internet Survey (2007), 87% канадцев считают, что государство должно инвестировать в использование Web 2. 0. The 2. 0 Challenge: взаимодействие государства - с бизнесом: консультации, рекрутинг, оказание госуслуг, Social marketing; - с гражданами: анализ демографических процессов, e. Democracy + GCPedia, GCConnex, GCInnovation (внутренний краудсорсинг) Санкт-Петербург, 31 января 2018 23

Финляндия С 1 марта в Финляндии действует поправка в Конституции, которая обязывает парламентариев в Финляндия С 1 марта в Финляндии действует поправка в Конституции, которая обязывает парламентариев в обязательном порядке рассматривать предложения граждан, набравшие 50 тысяч подписей. n Платформа «Открытое правительство» n Санкт-Петербург, 31 января 2018 24

Инициативы граждан на локальном уровне n Sanpablog, квартал Сан-Паоло в Турине - n www. Инициативы граждан на локальном уровне n Sanpablog, квартал Сан-Паоло в Турине - n www. sanpablog. it/? page_id=111 Порту-Алегре (Бразилия) - www. portoalegre. cc n Инициатива жителей Гамбурга по обсуждению проблем города - www. nexthamburg. de Санкт-Петербург, 31 января 2018 25

Низкотехнологичные проекты n MKSS (Раджастан, Индия) – данные о госрасходах клеят на стенах домов, Низкотехнологичные проекты n MKSS (Раджастан, Индия) – данные о госрасходах клеят на стенах домов, чтобы каждый житель мог прокомментировать, кто из чиновников получает зарплату, хотя на самом деле умер; какие мосты были построены в никуда; какой необходим бюджет. Санкт-Петербург, 31 января 2018 26

Инициативы НПО по созданию платформ для взаимодействия граждан с государством n n n European Инициативы НПО по созданию платформ для взаимодействия граждан с государством n n n European Institute for Public Participation (Германия) (www. participationinstitute. org) People& Participation Online, НПО “Involve” и фирма “Headshift” (www. peopleandparticipation. net/display/Involve/Home) Ushahidi (Кения): создан для оказания пострадавшим в беспорядках после выборов 2008 г. ; Премия Бон Джови (с февраля 2012) для проектов масштабируемых приложений Web 2. 0, направленных на помощь бездомным и госслужащим, работающим с бездомными. Serious games: - Красный крест (подготовка волонтеров с помощью Twitter); - Amnesty the game (инициатива Amnesty International против смертной казни в мире), на базе Facebook Санкт-Петербург, 31 января 2018 27

Процесс консолидации различных инициатив 2. 0 Причина: неспособны в одиночку обеспечить политическую мобилизацию граждан Процесс консолидации различных инициатив 2. 0 Причина: неспособны в одиночку обеспечить политическую мобилизацию граждан n Infotoolkit (управление коммуникациями сообщества) + e. Part (мониторинг ответов властей на запросы граждан) n Санкт-Петербург, 31 января 2018 28

Краудфандинг n Spacehive (Великобритания) – краудфандинговый проект для благоустройства: создания стоек, парковых скамеек и Краудфандинг n Spacehive (Великобритания) – краудфандинговый проект для благоустройства: создания стоек, парковых скамеек и т. д. Санкт-Петербург, 31 января 2018 29

Краудсорсинговые проекты в лицензировании, патентной деятельности Идея высказана Бет Новек в книге «Wiki Government» Краудсорсинговые проекты в лицензировании, патентной деятельности Идея высказана Бет Новек в книге «Wiki Government» (2009) n США, с 2012, Патентное ведомство. n Санкт-Петербург, 31 января 2018 30

Инициативы бизнеса и НПО по созданию платформ для взаимодействия граждан с государством в России Инициативы бизнеса и НПО по созданию платформ для взаимодействия граждан с государством в России n n n «Карта помощи пострадавшим от пожаров» «Виртуальная Рында: Атлас Помощи» ОАО «Сбербанк России» (сэкономили 1 млрд. долл. ) Санкт-Петербург, 31 января 2018 31

Россия Общественное обсуждение официальных документов n n n n Большоеправительство. рф, E-demokratia. ru Zakon. Россия Общественное обсуждение официальных документов n n n n Большоеправительство. рф, E-demokratia. ru Zakon. government. ru – общественное обсуждение законов Сайты госзакупок, торгов, размещения заказов "АЦК-Открытый бюджет" (компания БФК) – просто информирование, без участия граждан fedstat Gos. Book. ru (эксперты, пример Web 3. 0 ? ), Gosdiscuss. ru и др. Гос. Люди. ру Govweb. ru https: //vashkontrol. ru "Электронный парламент « (инициатива В. И. Матвиенко, ноябрь 2012): проект интернет-портала с возможностью общественного обсуждения законопроектов Интернет-площадка «Общественная инициатива сенатора» О. С. Хацаева (Респ. Сев. Осетия-Алания) Проект – на сайте госуслуг (инициатива депутата Р. Шлегеля) Российская общественная инициатива (эл. петиции, в т. ч. местного значения) Санкт-Петербург, 31 января 2018 32

Схема «Социальной сети развития» (компания ТЕКОРА) ПРОГРАММА ИДЕЯ Автор(ы) ЗАПРОС РЕЗУЛЬТАТ Государственные органы управления Схема «Социальной сети развития» (компания ТЕКОРА) ПРОГРАММА ИДЕЯ Автор(ы) ЗАПРОС РЕЗУЛЬТАТ Государственные органы управления Социальная Сеть Развития ПРЕДЛОЖЕНИЕ Заявка Администрирование Заявка Информационная система, выполняя роль посредника, обеспечивает с максимальной скоростью и без искажений непосредственное взаимодействие авторов и сотрудников государственных органов управления. 33

Методы первичной оценки предложений социальной и политической направленности Поток предложений Значимость Количество просмотров Суждения Методы первичной оценки предложений социальной и политической направленности Поток предложений Значимость Количество просмотров Суждения Риски Пригодность Рентабельность Реализуемость Рейтинги предложений 34

Перечень обработанных предложений (схема), ТЕКОРА Обработка Регистрация Содержание Права Риск Дата Пригодность публикации для Перечень обработанных предложений (схема), ТЕКОРА Обработка Регистрация Содержание Права Риск Дата Пригодность публикации для региона Реализуемость по ресурсам Обсуждение Доходность Значимость Рентабельность Сумма баллов Просм отров № Предложение 201 Название Автор 9. 10. 07 5. 15 12 189 Название Не указан 16. 10. 07 -2. 75 5 1. 00 7 0. 00 3 Раздел блокирован автором 188 168 Название Авторы 5. 10. 07 14. 12. 07 Документ блокирован менеджером Список предложений с результатами авторской обработки и коллективного обсуждения позволяет сравнивать предложения по различным параметрам, выявлять наиболее перспективные и включать в целевые программы развития региона 35

Санкт-Петербург, 31 января 2018 36 Санкт-Петербург, 31 января 2018 36

Санкт-Петербург, 31 января 2018 37 Санкт-Петербург, 31 января 2018 37

Санкт-Петербург, 31 января 2018 38 Санкт-Петербург, 31 января 2018 38

Определение путей развития Зеленограда (октябрь 2012) - Платформа Witology - Система рейтингов 39 Определение путей развития Зеленограда (октябрь 2012) - Платформа Witology - Система рейтингов 39

n n Апрель 2012 – совещание Правительства в Ново. Огареве: Путин: «Нужно шире применять n n Апрель 2012 – совещание Правительства в Ново. Огареве: Путин: «Нужно шире применять возможности современной технологии общественной экспертизы, в рамках которой предложения и решения может предлагать каждый пользователь Интернета без каких-либо ограничений» Август 2012 - Концепция формирования механизма публичного представления предложений граждан с использованием интернета для рассмотрения в Правительстве РФ: «все предложения, выраженные с использованием средств специализированного ресурса, поддержанные в течение одного года не менее 100 тыс. граждан, подлежат обязательному рассмотрению рабочей группой при Правительственной комиссии по координации деятельности открытого правительства» Санкт-Петербург, 31 января 2018 40

Электронные петиции n n n Риск ущемления прав граждан, не владеющих Интернетом Необходимость экспертной Электронные петиции n n n Риск ущемления прав граждан, не владеющих Интернетом Необходимость экспертной оценки ( «фильтрации» ) Необходимость учета голосов против инициативы, но тогда – риск «затухнуть» инициативности: на 1 конструктивное предложение – 10 критиков-троллей Как избежать мошенничества с аккаунтами? Риски для личной секретности Что делать в случае разного характера участия разных граждан? Санкт-Петербург, 31 января 2018 41

Проблемы Открытого правительства в России n n Открытое правительство в России ограничено обсуждением того, Проблемы Открытого правительства в России n n Открытое правительство в России ограничено обсуждением того, как сделать государство лучше, но без раскрытия информации Цель – не содействовать гражданскому обществу, а поднять рейтинг властей 1 95% посетителей сайта Открытого правительства были недостаточно осведомлены о целях инициативы (согласно опросу на сайте, 2012) Несогласованность между ведомством М. Абызова и Минсвязи см. Доклад Президенту РФ по итогам деятельности Рабочей группы по формированию системы «Открытое правительство» от 5 мая 2012 1 42

www. turchak. ru (Псковская область) n Цель для губернатора: отслеживать, как чиновники работают с www. turchak. ru (Псковская область) n Цель для губернатора: отслеживать, как чиновники работают с обращениями граждан Проблемы сайта: n Низкая активность чиновников + высокая активность граждан n Плохая работа раздела «Предложения» n Принцип формирования повестки дня n Категоризация обращений и способы их адресации n Отсутствие открытой статистики работы чиновников на сайте Санкт-Петербург, 31 января 2018 43

Другие проекты в России n Fix. Vil (Франция): адаптирован в России – Астрахань, Ханты-Мансийск, Другие проекты в России n Fix. Vil (Франция): адаптирован в России – Астрахань, Ханты-Мансийск, … Подобные проекты - Fix-my-Street (США, http: //www. fixmystreet. com), Urbanias (Сан-Паулу, Бразилия, www. urbanias. com. br) Streetjournal. org n Budget. mos. ru – бюджет Москвы n e. Democracy, i. Democracy n Rusg 2 c. ru n Санкт-Петербург, 31 января 2018 44

 «Моя территория» (Streetjournal. ru): общественный проект гражданского контроля за состоянием инфраструктуры Санкт-Петербург, 31 «Моя территория» (Streetjournal. ru): общественный проект гражданского контроля за состоянием инфраструктуры Санкт-Петербург, 31 января 2018 45

 «Моя территория» (Streetjournal. ru) Санкт-Петербург, 31 января 2018 46 «Моя территория» (Streetjournal. ru) Санкт-Петербург, 31 января 2018 46

Краудсорсинговое приложение для Facebook Pravo. ru 47 Краудсорсинговое приложение для Facebook Pravo. ru 47

Краудсорсинговое приложение для Facebook Pravo. ru 48 Краудсорсинговое приложение для Facebook Pravo. ru 48

Краудсорсинговое приложение для Facebook Pravo. ru 49 Краудсорсинговое приложение для Facebook Pravo. ru 49

Правозащитная группа «Гражданин. Армия. Право» n n n n Краудсорсинг и армия: мониторинг нарушений Правозащитная группа «Гражданин. Армия. Право» n n n n Краудсорсинг и армия: мониторинг нарушений прав призывников и военнослужащих на базе платформы «Ushahidi» Проблемы: Необходимость проверки информации Большой поток информации Большой временной разрыв между поступлением информации о событии и фактом правонарушения Вопросы государственной тайны Вопросы с личными данными Необходимо гарантировать безопасность военнослужащего Санкт-Петербург, 31 января 2018 50

City. Docs: госуслуги без посредников, альтернатива ЕЦД Оформление документов для: n n n Регистрации City. Docs: госуслуги без посредников, альтернатива ЕЦД Оформление документов для: n n n Регистрации транспортных средств в ГИБДД Оформления договора купли-продажи транспортного средства Получения, обмена, восстановления водительского удостоверения в ГИБДД 3 шага: 1. Скачать и установить программу 2. Ответить на вопросы 3. Распечатать анкету и квитанции n Каждые 30 дней обновления – информация должна быть актуальной n Технология «толстого клиента» (скачал и установил на свой ПК) – минимизирован риск ошибок при заполнении n Стоимость решения для пользователя – 0 (ноль) рублей. Для граждан сервис должен быть бесплатным. Санкт-Петербург, 31 января 2018 51

Russian Internet Week - RIW (Москва, 17 -19 октября 2012) n n n Блок-конференция Russian Internet Week - RIW (Москва, 17 -19 октября 2012) n n n Блок-конференция «CROWDCON Краудсорсинг в России» Секция «Электронная демократия, Электронное Правительство, Открытое Правительство - модная тенденция или реальные рычаги? » (Блокконференция «the. Runet» ) Секция «Интернет меняет город» (в рамках блокконференции «Интернет-бизнес» ): как бизнес может влиять на оказание госуслуг в городской среде Санкт-Петербург, 31 января 2018 52

n Лоуренс Лессиг: 3 поколения интернетплатформ – для исследователей -> для бизнеса -> для n Лоуренс Лессиг: 3 поколения интернетплатформ – для исследователей -> для бизнеса -> для государства Санкт-Петербург, 31 января 2018 53

Что дальше? Gov. 2. 1 ? Gov. 3. 0 ? Gov. 4. 0 ? Что дальше? Gov. 2. 1 ? Gov. 3. 0 ? Gov. 4. 0 ? www. scoop. it Санкт-Петербург, 31 января 2018 54

Показатели индекса развития электронного правительства в Российской Федерации (UN e-Government Survey 2003 - 2012) Показатели индекса развития электронного правительства в Российской Федерации (UN e-Government Survey 2003 - 2012) Report’s publication, year 2012 2010 2008 2005 2004 2003 0, 73 45 0, 51 36 0, 51 20 0, 53 29 0, 50 17 0, 44 30 Place of the Russian Federation in the rating 27 59 60 50 52 58 Rating Components: – Online Services * 0, 66 01 0, 33 02 0, 33 44 0, 45 38 0, 39 00 0, 22 30 – Telecommunicatio n Infrastructure 0, 65 83 0, 27 65 0, 24 82 0, 19 47 0, 18 52 0, 18 50 0, 88 50 0, 93 97 0, 95 89 0, 95 00 0, 93 00 0, 92 00 e-Government Development Index – Human Capital Источник: United Nations e-Government Surveys. Санкт-Петербург, 31 января 2018 55

Степень открытости информации официальных сайтов высших исполнительных органов государственой власти субъектов Российской Федерации, 2007 Степень открытости информации официальных сайтов высших исполнительных органов государственой власти субъектов Российской Федерации, 2007 -2012 гг. Санкт-Петербург, 31 января 2018 56

The dynamics of civil initiatives’ emergence on “Russian Public Initiative” portal (https: //www. roi. The dynamics of civil initiatives’ emergence on “Russian Public Initiative” portal (https: //www. roi. ru/), April 2013 Theme/ Level of Governance 1 st week 2 nd week 3 rd week Development of Infrastructure 55 130 219 Economic Sphere 27 67 146 Public Administration and Legislation 25 65 160 State Support and Social Services 26 84 172 Ecology and Security 31 61 115 114 218 435 Regional 7 26 38 Municipal 7 10 14 128 254 487 Theme Level of Governance Federal Total Санкт-Петербург, 31 января 2018 57

Краудсорсинговые проекты в оценке населением качества государственных услуг Болгов Радомир Викторович, rbolgov@yandex. ru Санкт-Петербург, Краудсорсинговые проекты в оценке населением качества государственных услуг Болгов Радомир Викторович, rbolgov@yandex. ru Санкт-Петербург, 31 января 2018 58