Инструментарий сбора и анализа данных для антикоррупционных расследований

После проверки и очистки данных можно приступать к их анализу. А. Валеева в своей работе «Open data in a closed political system: open data investigative journalism in Russia» дает совет журналистам-расследователям: «Не читайте данные, анализируйте их» Valeeva A. Open data in a closed political system: open data in investigative journalism in Russia. 2017 // Reuters Institute for the study of journalism. URL: http://reutersinstitute.politics.ox.ac.uk/sites/default/files/2017-10/Valeeva_Open%20data%20and%20investigative%20journalism%20in%20Russia.pdf (дата обращения: 12.05.2018). Она ссылается на слова Георгия Албурова, главы отдела расследований Фонда борьбы с коррупцией, который считает, что «каждый журналист-расследователь должен обладать навыками программирования или работать в команде с человеком с подобными навыками. Способность анализировать гигабайты и терабайты данных и автоматизировать процесс поиска закономерностей и связей между ними очень важна. Умение анализировать данные - это 80% успеха в расследованиях» Там же..

Авторы «Учебного пособия для дата-журналистов» приводят пример, как анализ данных может быть полезен при расследовании коррупционных проявлений. Они перечисляют несколько возможностей анализа данных. Во-первых, «анализ данных позволяет выявить резко отклоняющиеся значения» Константарас Е. Учебное пособие по дата-журналистике // Региональный центр ПРООН для стран Европы и СНГ URL: http://www.odecanet.org/wp-content/uploads/2017/01/Module-1-UNDP-student_ru_loc.pdf (дата обращения: 12.05.2018) - большие или маленькие. Такое значение может указать, например, на то, что государственный орган переплачивает за определенную услугу или товар или на то, что должностное лицо получает так называемый «откат» и кладет разницу от сделки в свой карман. «Или же это может означать, что кто-то нашел лазейку в системе и эксплуатирует ее» Там же., - добавляют они.

Это утверждение в пособии проиллюстрировано примером из практики издания The Guardian - проектом «MPs' expenses» Rogers S. MPs' expenses: how we visualised the data // The Guardian. URL:

https://www.theguardian.com/news/datablog/2010/feb/05/mps-expenses-houseofcommons (дата обращения: 12.05.2018). Его автор показал, как некоторые члены парламента тратили чрезмерные суммы бюджетных денег на телефонные счета и ремонт своих офисов, тем самым превышая должностные полномочия. После публикации несколько членов парламента вернули деньги, а некоторые не были переизбраны, отмечают авторы «Учебного пособия для дата-журналистов».

Еще один пример подобных отклонений в данных, связанный с государственными закупками, обнаружило региональное издание 365info.kz. Они нашли «самый быстро проведенный тендер Казахстана» Ковалева Т. Самый быстрый тендер Казахстана: всего 8 минут от начала и до финиша // 365info.kz. URL:

https://365info.kz/2014/08/samyj-bystryj-tender-kazaxstana-vsego-8-minut-ot-nachala-i-do-finisha/ (дата обращения: 12.05.2018). Согласно публикации, Центру судебной экспертизы министерства юстиции Казахстана понадобилось восемь минут, чтобы объявить о начале тендера, принять заявки и закрыть прием заявок.

Во-вторых, анализ данных позволяет «увидеть скрытые связи» Константарас Е. Учебное пособие по дата-журналистике // Региональный центр ПРООН для стран Европы и СНГ URL: http://www.odecanet.org/wp-content/uploads/2017/01/Module-1-UNDP-student_ru_loc.pdf (дата обращения: 12.05.2018). «Сопоставляя базы данных, мы можем найти скрытые взаимосвязи во власти, которые говорят о незаконных политических, экономических и социальных взаимоотношениях» Там же. , отмечают авторы «Учебного пособия для дата-журналистов». Они иллюстрируют этот тезис примером из практики информационного агентства Reuters. Проект «Connected China» агрегирует данные из сети источников Reuters, отслеживая и визуализируя взаимосвязи людей и учреждения, которые формируют «элитную правящую верхушку Китая» Константарас Е. Учебное пособие по дата-журналистике // Региональный центр ПРООН для стран Европы и СНГ URL: http://www.odecanet.org/wp-content/uploads/2017/01/Module-1-UNDP-student_ru_loc.pdf (дата обращения: 12.05.2018). С помощью этой базы гражданские общественные организации расследуют взаимосвязи между политиками и частными компаниями, выявляя коррупционные нарушения в заключении государственных контрактов.

Правильный выбор инструмента для анализа зависит, в том числе, и от формата исходных данных. Е. Константарас - журналист-расследователь, специализирующийся на журналистике данных в развивающихся странах, в своей работе «Учебное пособие для дата-журналистов» («Data Journalism Manual») перечисляет основные форматы данных и предлагает список инструментов для работы с ними. Для работы с самыми популярными табличными форматами - xls, xlsx, csv и tsv - Ева Константарас предлагает использовать Microsoft Excel.

Для перевода файлов в PDF, в котором часто представлены официальные документы, с которыми приходится сталкиваться журналисту-расследователю, в машиночитаемый формат автор советует пользоваться такими инструментами, как Tabula, Cometdocs, PDFtoExcel и Zamzar. Автор отмечает, что, если данные представлены не как текст, а как отсканированные изображения и хранятся в форматах PDF, GIF, JPEG, PNG, BMP, то преобразовать их в машиночитаемые форматы помогут такие инструменты, как Docs OCR и Document Cloud.

Н. Мульвад в своей статье «Копаем глубже: краткое руководство по бесплатным и недорогим инструментам обработки данных» предлагает другие инструменты для извлечения данных из PDF-файлов: CometDocs и OnlineOCR.net&. Автор отмечает, что редакциям больше не нужны большие бюджеты для анализа данных: «можно легко получить доступ к бесплатным или недорогим базовым инструментов обработки данных» Мульвад Н. Копаем глубже: краткое руководство по бесплатным и недорогим инструментам обработки данных // Global Investigative Journalism Network. URL:

https://gijn.org/2017/07/28/%D0%BA%D0%BE%D0%BF%D0%B0%D0%B5%D0%BC-%D0%B3%D0%BB%D1%83%D0%B1%D0%B6%D0%B5-%D0%BA%D1%80%D0%B0%D1%82%D0%BA%D0%BE%D0%B5-%D1%80%D1%83%D0%BA%D0%BE%D0%B2%D0%BE%D0%B4%D1%81%D1%82%D0%B2%D0%BE-%D0%BF%D0%BE/ (дата обращения: 12.05.2018). В качестве бесплатного инструмента для работы с неструктурированными данными, их очистки и преобразования из одного формата в другой автор советует OpenRefine.

В результате сбора данных может образоваться масса информации, анализ которой невозможен без специальных инструментов, структурирующих связи между элементами данных. Так, например, С. Роджерс, журналист The Guardian в главе «Данные в новостях: WikiLeaks», вошедшей в «Пособие по журналистике данных», вспоминает, что при работе с военными отчетами WikiLeaks изданию помог SQL (Structured Query Language - «язык структурированных запросов» Дейт К. Дж. Введение в системы баз данных. - 8-е изд. - М. [и др.] : Вильямс, 2005. URL:

ftp://ftp.vt.tpu.ru/study/Shestakov/Public/database/%CA.%20%C4%E6.%20%C4%E5%E9%F2%20-%20%C2%E2%E5%E4%E5%ED%E8%E5%20%E2%20%F1%E8%F1%F2%E5%EC%FB%20%E1%E0%E7%20%E4%E0%ED%ED%FB%F5.%208-%E5%20%E8%E7%E4%E0%ED%E8%E5.pdf (дата обращения: 12.05.2018)) - язык для работы с реляционными базами данных.

С. Роджерс пишет, что данные поступили к журналистам в виде Excel-файла с 92 201 строкой. Команда The Guardian превратила его во внутреннюю базу данных с использованием SQL. «Журналисты теперь могли осуществлять поиск по ключевым словам или тем или иным событиям. Получилось, что внезапно набор данных стал доступным, и создавать материалы на его основе стало гораздо легче» Роджерс С. Данные в новостях: WikiLeaks // Пособие по журналистике данных. URL:

https://ria.ru/files/book/_site/%D0%BA%D0%BE%D0%BD%D0%BA%D1%80%D0%B5%D1%82%D0%BD%D1%8B%D0%B5_%D0%BF%D1%80%D0%B8%D0%BC%D0%B5%D1%80%D1%8B_7.html (дата обращения: 12.05.2018), - делится Роджерс.

Учебное пособие «Decoding Data» предлагает такой способ анализа данных, как визуализация сложных сетей. По мнению авторов книги, этот способ позволяет определить возможные конфликты интересов в эшелонах власти: они отмечают, что именно сетевая модель исследования помогает выявлять коррумпированных политиков и организованную преступность.

Журналист П. Раду приводит пример такой ситуации: в результате поиска бизнеса, которым незаконно владеет чиновник, могут обнаружиться сотни связанных между собой компаний из разных стран мира: в этом случае будут полезны средства визуализации и инструменты анализа социальных взаимосвязей. Как пишет Раду, сотрудники Румынского центра журналистских расследований используют специальное программное обеспечение для анализа данных - программу I2 (второе название - Analyst's Notebook), разработанную компанией IBM. Создатели инструмента называют его одной из лучших визуальных исследовательских программ, которая «позволяет аналитику или расследователю быстро разбираться в сложных схемах и больших объемах, казалось бы, не связанных между собой данных, проанализировать информацию и сделать выводы» Раду П. Следите за деньгами: Пособие для журналистов, разоблачающих коррупцию // Международный центр журналистики. URL: https://ti-ukraine.org/wp-content/uploads/2016/11/follow_the_money_rus_v_2010-web.pdf (дата обращения: 12.05.2018).

Раду объясняет механизм работы программы: I2 - это «инструмент анализа социальных взаимосвязей (Social Network Analysis), который дает возможность пользователю отобразить его знания графически и определить связи между фигурантами, ключевыми событиями, фирмами и другими компаниями» Там же..

Автор пособия приводит наглядный пример, как работает I2: в программу можно загрузить сотни таблиц Excel с такими данными как названия компаний, имена акционеров, датами рождения и адресами, и инструмент построит визуальные связи между общими характеристиками. Пол Раду отмечает, что в программе I2 может работать целая сеть журналистов. П. Раду перечисляет и другие программы для анализа социальных взаимосвязей - NetMiner, UСInet и Pajek.

Анализ социальных сетей как метод работы с данными при проведении расследования выделяют и другие исследователи. Эксперт в области анализа данных Д. Мина называет анализ социальных сетей техникой интеллектуального анализа данных, представляющей их структуру в виде связанных между собой объектов. Анализ социальных сетей включает в себя создание матрицы, построение графа и анализ связей. Для ручного создания графов подходит инструмент Microsoft Office Visio, а для автоматизированной визуализации программное обеспечение Social Networks Visualizer.

Существуют и другие аналитические инструменты, позволяющие визуализировать отношения между людьми, организациями и транзакциями. Еще один пример подходящего инструмента для выявления схем при анализе данных - Visual Investigative Scenarios. Как пишет журналист OCCRP Л. Марзук в своей работе «Exposing the truth: A guide to investigative reporting in Albania», VIS особенно полезен при построении «схем, в которые вовлечены коррумпированные персоны и компании» Marzouk L. Exposing the truth: A guide to investigative reporting in Albania // The Organization for Security and Co-operation in Europe. URL: https://www.osce.org/albania/201276?download=true (дата обращения: 12.05.2018). Другой инструмент - Gephi - «интерактивная платформа визуализации и исследования всех видов сетей и сложных систем, динамических и иерархических графов» Там же.. Эти программы позволяют не только проанализировать данные, но и визуализировать их, чтобы превратить свое расследование в понятный для читателя продукт. «Бесплатное и простое в использовании программное обеспечение, доступное онлайн, поможет создать интерактивную инфографику, таймлайны и карты, чтобы оживить вашу историю» Там же., - пишет Л. Марзук.

Еще один совет от эксперта области, П. Раду - «используйте технологии и сотрудничайте с программистами» Раду П. Отслеживая деньги: трансграничное сотрудничество // Пособие по журналистике данных. URL:

https://ria.ru/files/book/_site/%D0%B2_%D0%BD%D1%8C%D1%8E%D1%81%D1%80%D1%83%D0%BC%D0%B5_7.html (дата обращения: 12.05.2018). Автор убежден, что программное обеспечение помогает журналистам-расследователям собирать и обрабатывать информацию: «Различные типы программного обеспечения помогают эксперту, занимающемуся расследованием, пробиться через наслоения лишнего во время раскапывания информации и поиска смысла в больших объемах данных, а также при поиске правильных документов, которые требуются для того, чтобы первыми предать историю огласке» Там же..

П. Раду приводит пример такого взаимодействия между журналистами и техническими специалистами: активист и программист Дэн О'Хьюджин с помощью вэб-скрейпинга извлек информацию из Панамского реестра компаний и изменил форму данных так, чтобы ими могли воспользоваться те, кто проводит расследование. Дэн О'Хьюджин создал специальный сайт, который поддерживал поиск в реестре не только по компаниям, но и по именам и фамилиям владельцев бизнеса, что помогло многим журналистам. В частности, Хадиджа Исмайлова, журналист «Radio Free Europe/Radio Liberty», воспользовавшись этим сервисом, опубликовала расследование Ismayilova K. Azerbaijani President's Daughters Tied To Fast-Rising Telecoms Firm // RadioFreeEurope/RadioLiberty. URL: https://www.rferl.org/a/azerbaijan_president_aliyev_daughters_tied_to_telecoms_firm/24248340.html (дата обращения: 12.05.2018) об офшорных компаниях дочерей президента Азербайджана Ильхама Алиева.

Некоммерческая организация Международный центр для журналистов (International Center for Journalists) публикует на своем сайте коллекцию полезных для журналистов инструментов своей образовательной программы ICFJ Knight Fellowships. В этот список они поместили инструмент с открытым исходным кодом Grano, который помогает извлекать и анализировать данные для изучения связей между государственными и частными лицами. Этот инструмент использовался при создании проекта Siyazana - базы данных, которая выстраивает связи между политическими и коммерческими авторитетами Южной Африки.

Обобщая результаты, полученные в данном разделе исследования, отметим, что инструменты сбора и анализа данных для антикоррупционных расследований в последние несколько лет претерпели значительные изменения. На смену традиционным способам сбора и анализа информации пришли методы с использованием новейшего программного обеспечения. Поменялись и источники данных, полезные при проведении антикоррупционного расследования. Мы выделили такие источники как российские государственные порталы, полезные при выявлении конфликта интересов и других форм проявления коррупции: Официальный реестр юридических лиц (ЕГРЮЛ), Портал государственных и муниципальных закупок, Реестр собственников недвижимости и земельных участков (Росреестр), Публичная кадастровая карта, Портал Министерства юстиции РФ. Отдельно в работе описаны сервисы, агрегирующие официальную государственную информацию: СПАРК и Контур-фокус для данных о юридических лицах, а также сайт проекта Госзатраты, который предоставляет доступ к информации о государственных закупках с помощью API.

Мы также описали зарубежные базы данных - реестры компаний и недвижимости стран Европы и США, а также удобные для журналистов сервисы, агрегирующие официальные данные: Data Dashboard, Lexis-Nexis, Investigative Dashboard, Enigma Public и другие. Еще один описанный источник информации - базы данных об офшорных компаниях, примером которой может служить поисковая машина Offshore Leaks Database. Кроме этого, в качестве источника данных в работе выделены социальные сети и картографические сервисы и описаны специальные инструменты для сбора данных из них. Список современных инструментов сбора данных пополнен базами мониторинга передвижений транспорта (Flight Radar, Vessel Tracker и другими), сервисами для извлечения метаданных, методами глубокого поиска в Goggle, API, расширениями и сервисами для автоматического скрейпинга данных, а также языками программирования, такими как Python.

В исследовании описаны инструменты для проверки, очистки и анализа данных: Microsoft Excel, Open Refine, язык работы с реляционными базами данных SQL и другие. Отдельное внимание уделено инструментами для анализа и визуализации социальных взаимосвязей - I2, Social Networks Visualizer, Gephi, VIS и другим.



2. Применение современного инструментария сбора и анализа данных участниками антикоррупционных расследований

2.1 Инструментарий сбора и анализа данных в современных антикоррупционных расследованиях: примеры использования

В данной части работы рассмотрено, какие инструменты сбора и анализа данных используют российские и зарубежные расследователи в своих материалах на тему коррупции. Данный параграф содержит базу данных, в которой собраны антикоррупционные расследования последних трех лет и инструментарий сбора и анализа данных, который применяли их авторы. Опишем алгоритм исследования: для проверки гипотезы о том, что современные антикоррупционные расследования характеризуются использованием новых инструментов сбора и анализа данных, был проведен анализ расследований, опубликованных с 2015 по 2018 годы. В основу практической части легли как журналистские, так и гражданские расследования авторов из разных стран.

База данных содержит следующие поля: название расследования, его автор, страна, дата публикации, тип расследования по субъекту (гражданское или журналистское), объект расследования (имя персоны, название государственного органа или компании, которым посвящено расследование), а также форма проявления коррупции, которую описывает автор.

Еще один элемент анализа - инструменты сбора данных и инструменты анализа данных: здесь мы перечисляем инструментарий, с помощью которого было подготовлено антикоррупционное расследование. Отдельно база данных представлена на онлайн-платформе Airtable по адресу: https://airtable.com/shryht2q1rWlG8GR8/tbl3scry9pVfGauVX. Она содержит список более 30 инструментов сбора и анализа данных, для каждого из которых указано короткое описание, ссылка на ресурс, пример расследования и формы проявления коррупции, которые инструмент может помочь выявить.

Примеры использования современного инструментария сбора данных в антикоррупционных расследованиях

1) Название расследования: «Как «откаты» с государственных закупок попадают в бюджеты политических партий во время избирательных кампаний» Colun M., Как «откаты» с государственных закупок попадают в бюджеты политических партий во время избирательных кампаний // Anticoruptie. URL: https://anticoruptie.md/ru/rassledovanija/obschestvennye-dengi/kak-otkaty-s-gosudarstvennyh-zakupok-popadajut-v-bjudzhety-politicheskih-partij-vo-vremja-izbiratelnyh-kampanij (дата обращения: 12.05.2018)

Автор: Mariana Colun, Anticoruptie

Страна: Республика Молдова

Дата публикации: 24.09.2015

Вид расследования по субъекту: Журналистское

Объект расследования: Политические партии Республики Молдова - «Демократическая партия», «Социалистическая партия», «Наша партия»

Форма проявления коррупции: «Откат»

Источники данных, инструментарий сбора и анализа данных: Финансовые отчеты политических партий ЦИКа Республики Молдова, данные Агентства по государственным закупкам - tender.gov.md, Visual Investigative Scenarios (VIS) для визуализации связей.

2) Название расследования: «Lawmaker with lavish decor billed private planes, concerts» Gillum J., Braun S. Lawmaker with lavish decor billed private planes, concerts // Associated Press. URL: https://apnews.com/e2f1f52c3eb34caca7d74e5bf90f27f9/lawmaker-lavish-decor-billed-private-planes-concerts (дата обращения: 12.05.2018)

Автор: Jack Gillum, Stephen Braun, Associated Press

Страна: США

Дата публикации: 24.02.2015

Вид расследования по субъекту: Журналистское

Объект расследования: Член Конгресса США Аарон Шок

Форма проявления коррупции: Нецелевое расходование бюджетных средств

Источники данных, инструментарий сбора и анализа данных: социальная сеть Instagram, инструменты для извлечения метаданных из фотографий, сервис, агрегирующий данные о перемещениях воздушных судов FlightAware.

3) Название расследования: «Часы чиновника-молодожена Пескова стоят дороже вашей квартиры» Часы чиновника-молодожена Пескова стоят дороже вашей квартиры // Фонд борьбы с коррупцией. URL: https://fbk.info/investigations/post/52/ (дата обращения: 12.05.2018)

Автор: «Фонд борьбы с коррупцией»

Страна: Россия

Дата публикации: 02.08.2015

Вид расследования по субъекту: Гражданское

Объект расследования: Пресс-секретарь президента России Дмитрий Песков

Форма проявления коррупции: Незаконное обогащение, незадекларированные доходы

Источники данных, инструментарий сбора и анализа данных: База данных антикоррупционных деклараций российских государственных служащих «Декларатор», инструменты извлечения метаданных снимков из социальной сети Instagram.

4) Название расследования: «Кто в замке живет?» Кто в замке живет? // Фонд борьбы с коррупцией. URL: https://fbk.info/investigations/post/87/ (дата обращения: 12.05.2018)

Автор: «Фонд борьбы с коррупцией»

Страна: Россия

Дата публикации: 23.07.2015

Вид расследования по субъекту: Гражданское

Объект расследования: Первый заместитель председателя Правительства Российской Федерации Игорь Шувалов

Форма проявления коррупции: Незаконное обогащение, незадекларированная собственность

Источники данных, инструментарий сбора и анализа данных: База антикоррупционных деклараций чиновников «Декларатор», карты Google Maps, Земельный реестр Великобритании, Единый государственный реестр юридических лиц, публичная база Вестминстерской управы.

5) Название расследования: «Какую собственность не афиширует белградский мэр» Дойчинович С., Печо Д., Чобанов А. Какую собственность не афиширует белградский мэр // OCCRP. URL:

https://www.occrp.org/mayorsstory/ru/The-Mayors-Hidden-Property/index.html (дата обращения: 12.05.2018)

Автор: Стеван Дойчинович, Драгана Печо, Атанас Чобанов, Bivol.bg, OCCRP

Страна: Республика Сербия

Дата публикации: 19.10.2015

Вид расследования по субъекту: Журналистское

Объект расследования: Мэр Белграда Синиша Мали

Форма проявления коррупции: Незаконное обогащение

Источники данных, инструментарий сбора и анализа данных: Реестр коммерческих сделок Болгарии, база данных офшорных компаний Британских Виргинских островов, антикоррупционные декларации Управления по борьбе с коррупцией Сербии.

6) Название расследования: «Золото партитуры» Анин Р., Шмагун О., Великовский Д. Золото партитуры // «Новая газета». URL: http://krug.novayagazeta.ru/12-zoloto-partituri (дата обращения: 12.05.2018)

Автор: Роман Анин, Олеся Шмагун, Дмитрий Великовский, «Новая газета»

Страна: Россия

Дата публикации: 03.04.2016

Вид расследования по субъекту: Журналистское

Объект расследования: Сергей Ролдугин, друг президента РФ Владимира Путина

Форма проявления коррупции: Конфликт интересов

Источники данных, инструментарий сбора и анализа данных: База данных офшорных компаний и документы юридической компании Mossack Fonseca, Единый государственный реестр юридических лиц, инструменты визуализации сетей.

7) Название расследования: «Миньоны Хуснуллина» Миньоны Хуснуллина // Трансперенси-Интернешнл - Россия. URL: http://transparency.org.ru/special/marat-husnullin/ (дата обращения: 12.05.2018)

Автор: «Трансперенси Интернешнл - Россия»

Страна: Россия

Дата публикации: 11.08.2016

Вид расследования по субъекту: Гражданское

Объект расследования: Заместитель мэра Москвы в Правительстве Москвы по вопросам градостроительной политики и строительства Марат Хуснуллин

Форма проявления коррупции: Конфликт интересов

Источники данных, инструментарий сбора и анализа данных: Единый государственный реестр юридических лиц, данные Департамента городского имущества города Москвы, сайт Единого банка проекта города Москвы, данные социальных сетей Одноклассники и Facebook, инструменты сетевого анализа для выявления родственных связей.

8) Название расследования: «Дело о прокурорах» Дело о Прокурорах // «Народной прокуратуры» // YouTube. URL: https://www.youtube.com/watch?v=pRflkxo9IoY (дата обращения: 12.05.2018)

Автор: Сообщество расследователей «Bellingcat», Телеканал «112 Украина»

Страна: Украина

Дата публикации: 23.01.2016

Вид расследования по субъекту: Журналистское

Объект расследования: Бывший сотрудник Генеральной прокуратуры Украины Александр Бондаренко

Форма проявления коррупции: Незадекларированные доходы

Источники данных, инструментарий сбора и анализа данных: антикоррупционные декларации, сервис Google Earth, Публичная кадастровая карта Украины, инструменты извлечения метаданных фотографий из социальной сети Instagram, международная географическая энциклопедия Wikimapia.

9) Название расследования: «Секрет Принцессы Ольги» Анин Р. Секрет «Принцессы Ольги» // «Новая газета». URL: https://www.novayagazeta.ru/articles/2016/07/31/69418-sekret-printsessy-olgi (дата обращения: 12.05.2018)

Автор: Роман Анин, «Новая газета»

Страна: Россия

Дата публикации: 31.07.2016

Вид расследования по субъекту: Журналистское

Объект расследования: Главный исполнительный директор государственной компании «Роснефть» Игорь Сечин

Форма проявления коррупции: Незаконное обогащение, незадекларированные доходы

Источники данных, инструментарий сбора и анализа данных: Инструменты извлечения метаданных из фотографии из социальной сети Instagram, сервис мониторинга перемещения морских судов Vessel Tracker.

10) Название расследования: «Распорядители земли Владимирской» Распорядители земли Владимирской // Трансперенси-Интернешнл - Россия. URL: http://transparency.org.ru/special/shokhin/ (дата обращения: 12.05.2018)

Автор: «Трансперенси Интернешнл - Россия»

Страна: Россия

Дата публикации: 21.06.2016

Вид расследования по субъекту: Гражданское

Объект расследования: Глава администрации города Владимира Андрей Шохин

Форма проявления коррупции: Лоббизм, непотизм

Источники данных, инструментарий сбора и анализа данных: Единый государственный реестр юридических лиц, Реестр собственников недвижимости и земельных участков, база судебных дел, инструменты визуализации связей и построения графов.

11) Название расследования: «Ресторатор и его ученики: кто поставляет 90% обедов в московские школы» Напалкова А., Рождественский И., Якорева А. Ресторатор и его ученики: кто поставляет 90% обедов в московские школы // РБК. URL: https://www.rbc.ru/business/18/07/2016/57852f819a7947410f6bc75b (дата обращения: 12.05.2018)

Автор: Анастасия Якорева, Анастасия Напалкова, Илья Рождественский, РБК

Страна: Россия

Дата публикации: 18.07.2016

Вид расследования по субъекту: Журналистское

Объект расследования: Московские государственные учреждения

Форма проявления коррупции: Лоббизм

Источники данных, инструментарий сбора и анализа данных: Портал государственных и муниципальных закупок, система, агрегирующая данные о зарегистрированных юридических лиц СПАРК, инструменты визуализации сетей.

12) Название расследования: «Сибирские дороги: как ремонтируют дороги в шести сибирских городах» Сибирские дороги // Трансперенси-Интернешнл - Россия. URL: http://transparency.org.ru/special/dorogisibiri/ (дата обращения: 12.05.2018)

Автор: «Трансперенси-Интернешнл - Россия»

Страна: Россия

Дата публикации: 28.04.2017

Вид расследования по субъекту: Гражданское

Объект расследования: Государственные и муниципальные предприятия Барнаула, Иркутска, Новосибирска, Омска, Томска и Читы

Форма проявления коррупции: Лоббизм

Источники данных, инструментарий сбора и анализа данных: Сайт Госавтоинспекции, сайт проекта «Безопасные и качественные дороги» Министерства транспорта Российской Федерации, данные региональных бюджетов на 2017 год, государственные контракты на ремонт дорог с сайта «Госзатраты», данные Единого государственного реестра юридических лиц, web-scraping, API Госзатрат, язык программирования Python, инструменты для построения социальных графов.

13) Название расследования: «Бот и вся реновация» Долинина И., Мароховская А. Бот и вся реновация // Medium. URL: https://medium.com/@tzurrealism/renovatsia-5bfc4f31f2a2 (дата обращения: 12.05.2018)

Автор: Алеся Мароховская, Ирина Долинина, Центр управления расследованиями

Страна: Россия

Дата публикации: 19.11.2017

Вид расследования по субъекту: Журналистское

Объект расследования: Правительство Москвы

Форма проявления коррупции: Лоббизм

Источники данных, инструментарий сбора и анализа данных: API социальной сети «Вконтакте», анализ данных с помощью библиотек NetworkX и Pandas для языка программирования Python, визуализация графов в Gephi.

14) Название расследования: «Путеводитель по Карловым Варам» Путеводитель по Карловым Варам // Муниципальный сканер. URL: https://munscanner.com/2017/01/karlovy-vary/ (дата обращения: 12.05.2018)

Автор: «Муниципальный сканер»

Страна: Россия

Дата публикации: 23.01.2017

Вид расследования по субъекту: Журналистское

Объект расследования: Депутат Законодательного собрания Краснодарского края Александр Фендриков, начальник Аппарата Губернатора Санкт-Петербурга Давид Адамия и другие

Форма проявления коррупции: Незадекларированные доходы, незаконное участие в предпринимательской деятельности

Источники данных, инструментарий сбора и анализа данных: Реестр недвижимости Чехии (Nahlнћenн do katastru nemovitostн http://nahlizenidokn.cuzk.cz/), Торговый реестр Чехии (Obchodnн rejstшнk https://or.justice.cz/ias/ui/rejstrik), некоммерческий картографический проект OpenStreetMap, свободная кроссплатформенная геоинформационная система QGIS, кадарстовая карта Чехии Katastr nemovitostн 2.0.

15) Название расследования: «В жертву режиму: как бизнес покупает у «Единой России» победу в госзакупках» Савина С. В жертву режиму // Russiangate. URL: https://russiangate.com/goskompanies/v-zhertvu-rezhimu/?sphrase_id=374608 (дата обращения: 12.05.2018)

Автор: Софья Савина, Russiangate

Страна: Россия

Дата публикации: 19.06.2017

Вид расследования по субъекту: Журналистское

Объект расследования: Политическая партия «Единая Россия»

Форма проявления коррупции: «Откат»

Источники данных, инструментарий сбора и анализа данных: Финансовые отчеты партий с сайта ЦИК России, данные Единого государственного реестра юридических лиц (система «Контур-фокус»), сбор данных с помощью API проекта «Госзатраты» - базы данных государственных контрактов, язык программирования Python, Adobe Acrobat Reader - приложение для извлечение данных из изображений, представленных в PDF.

16) Название расследования: «Апостол: реновация» Савина С. «Апостол»: реновация // Russiangate. URL: https://russiangate.com/obshchestvo/apostol-renovatsiya/?sphrase_id=374610 (дата обращения: 12.05.2018)

Автор: Софья Савина, Russiangate

Страна: Россия

Дата публикации: 10.07.2017

Вид расследования по субъекту: Журналистское

Объект расследования: Правительство Москвы

Форма проявления коррупции: Лоббизм

Источники данных, инструментарий сбора и анализа данных: сайт проекта «Госзакупки», API социальной сети Twitter, язык программирования Python, инструмент для построения графов Gephi.

17) Название расследования: «Дорожный ревизор» Петрова Е., Чарикова И. Дорожный ревизор // Трансперенси-Интернешнл - Россия. URL: https://transparency.org.ru/special/worldcup2018roads/ (дата обращения: 12.05.2018)

Автор: Екатерина Петрова, Ирина Чарикова, «Трансперенси Интернешнл - Россия»

Страна: Россия

Дата публикации: 12.12.2017

Вид расследования по субъекту: Гражданское

Объект расследования:

Форма проявления коррупции: Нецелевое расходование бюджетных средств

Источники данных, инструментарий сбора и анализа данных: API проекта «Госзатраты», агрегирующего государственные закупки, инструменты визуализации сложных схем.

18) Название расследования: «Рамзан Кадыров пользуется самым просторным бизнес-джетом в мире» Жолобова М. Рамзан Кадыров пользуется самым просторным бизнес-джетом в мире // Телеканал «Дождь». URL: https://tvrain.ru/news/ramzan_kadyrov_polzuetsja_samym_prostornym_biznes_dzhetom_v_mire-431585/https://tvrain.ru/news/ramzan_kadyrov_polzuetsja_samym_prostornym_biznes_dzhetom_v_mire-431585/ (дата обращения: 12.05.2018)

Автор: Мария Жолобова, Телеканал «Дождь»

Страна: Россия

Дата публикации: 05.04.2017

Вид расследования по субъекту: Журналистское

Объект расследования: Глава Чеченской Республики Рамзан Кадыров

Форма проявления коррупции: Незадекларированная собственность

Источники данных, инструментарий сбора и анализа данных: данные из социальной сети Instagram, сервисы поиска перемещений самолетов Flightradar24 и Flightaware, официальный реестр юридических лиц Бермудских островов.

19) Название расследования: «Своих не бросаем» Долинина И., Мароховская А. Своих не бросаем // Tilda. URL: http://svoihnebrosaem.tilda.ws/ (дата обращения: 12.05.2018)

Автор: Алеся Мароховская, Ирина Долинина, проект выполнен в рамках антикоррупционного хакатона «ДеклараБум», организованного «Трансперенси Интернешнл - Россия»

Страна: Россия

Дата публикации: 25.02.2018

Вид расследования по субъекту: Гражданское

Объект расследования: Государственные служащие, меняющие место работы

Форма проявления коррупции: Конфликт интересов

Источники данных, инструментарий сбора и анализа данных: Данные проекта «Декларатор» - публичной базы деклараций о доходах и имуществе публичных должностных лиц в России, анализ данных с помощью библиотек NetworkX и Pandas для языка программирования Python, визуализация социальных графов с помощью инструмента Визуализатор графов, разработанного компанией Social Data Hub.

20) Название расследования: «Показюк: автоматизированная система для анализа аномалий в декларациях» Показюк: автоматизированная система для анализа аномалий в декларациях // Github. URL: https://github.com/generall/declaramboom (дата обращения: 12.05.2018)

Автор: Группа авторов, проект выполнен в рамках антикоррупционного хакатона «ДеклараБум», организованного «Трансперенси Интернешнл - Россия»

Страна: Россия

Дата публикации: 25.02.2018

Вид расследования по субъекту: Гражданское

Объект расследования: Государственные служащие, задекларированное имущество которых не совпадает с изменением задекларированного дохода

Форма проявления коррупции: Незаконное обогащение

Источники данных, инструментарий сбора и анализа данных: Данные проекта «Декларатор» - публичной базы деклараций о доходах и имуществе публичных должностных лиц в России, данные Федеральной службы государственной статистики, система управления базами данных MongoDB, скрипт на языке программирования Python для автоматических Google-запросов.

Перечисленные примеры иллюстрируют утверждение о том, что современные журналисты и гражданские расследователи активно используют новые методы и инструменты поиска и анализа информации. Указанные публикации свидетельствуют, что современный инструментарий сбора и анализа данных позволяет расследователям выявлять в ходе своей работы факты существования у чиновников незадекларированных доходов и собственности, незаконного обогащения, конфликта интересов, случаи лоббизма и непотизма и «откатов». В следующем параграфе мы рассмотрим часть примеров подробно: проследим за ходом проведения конкретных антикоррупционных расследований, чтобы выяснить, как их авторы применяют современные инструменты сбора и анализа данных на практике.

2.2 Анализ практики применения современного инструментария сбора и анализа данных

Данная часть исследования посвящена детальному описанию технологий использования ряда инструментов сбора и анализа данных в конкретных примерах антикоррупционных расследований. Для анализа подобраны расследования, проведенные авторами таких изданий, как Associated Press, «Новая газета», Russiangate, сообщества расследователей Bellingcat, некоммерческой организации «Центр антикоррупционных исследований и инициатив «Трансперенси Интернешнл - Россия» и другими.

Расследование общественной организации «Трансперенси-Интернешнл - Россия» под названием «Сибирские дороги» Сибирские дороги // Трансперенси-Интернешнл - Россия. URL: http://transparency.org.ru/special/dorogisibiri/ (дата обращения: 12.05.2018) посвящено контролю дорожного ремонта в нескольких российских городах - Барнауле, Иркутске, Новосибирске, Омске, Томске и Чите. В ходе работы авторы проанализировали государственные контракты на ремонт дорог и выяснили, что более 50% всех подрядов выигрывают картели и аффилированные друг с другом фирмы.

В основу расследования легли следующие открытые данные: показатели состояния безопасности дорожного движения с сайта Госавтоинспекции (stat.gibdd.ru), данные сайта проекта «Безопасные и качественные дороги» Министерства транспорта Российской Федерации (bkd.rosdornii.ru), данные региональных бюджетов на 2017 год с сайтов местных правительств, государственные контракты на ремонт дорог с сайта проекта «Госзатраты», а также данные Единого государственного реестра юридических лиц.

Чтобы собрать данные о дорожно-транспортных происшествиях с сайта stat.gibdd.ru, расследователи воспользовались таким методом как web-scraping. Анализ факторов происшествий показал, что 55% ДТП сопровождались инфраструктурными проблемами: отсутствие разметки и дорожных знаков, дефекты покрытия. Следующим этапом стал сбор данных о качестве дорог. Авторы расследования отказались от детального анализа документов и экспертиз по проекту «Безопасные и качественные дороги», так как усомнились в соответствии этих данных реальному состоянию дорог, и схематично визуализировали их, создав обобщенную картину по городам.

Для сбора данных о государственных контрактах с сайта clearspending.ru авторы расследования использовали API проекта. По словам одного из авторов Сергея Устинова, еще одним этапом стала фильтрация данных: «мы отобрали ИНН организаций заказчиков в каждом городе, а потом выделили около 50 кодов ОКДП/ОКПД/ОКПД2, связанных с дорожным ремонтом» Устинов С., Как проводить дата-журналистские расследования (на примере проекта «Сибирские дороги»)? // Госзатраты. URL: https://clearspending.ru/news/kak-provodit-data-zhurnalistskie-rassledovaniya-na-primere-proekta-sibirskie-dorogi/ (дата обращения: 12.05.2018).

Для поиска конфликта интересов авторы применили машинный анализ: создали несколько скриптов на языке программирования Python, с помощью которых производился анализ участников аукционов и государственных заказчиков и поиск между ними подозрительных связей. Скрипты учитывали победу в аукционах и одинаковых учредителей, руководителей, телефоны, адреса и названия компаний. После этого авторы на основе автоматического анализа построили графы, которые визуально показали все подозрительные связи.

Проведенный анализ данных позволил выявить нарушения, которые повышают стоимость дорог и ухудшают их качество - это необоснованное укрупнение лотов, непрозрачные условиях технических заданий к контрактам, необоснованно сокращенные сроки выполнения работ, непрозрачное распределение субподрядов. «В случае с Иркутском, Томском и Читой, значительную часть контрактов получают государственные и муниципальные предприятия, которые затем, уже без публичного конкурса, раздают заказы субподрядным организациям. Вследствие этого возникает потенциально коррупционная ситуация, которая уже вылилась в ряд скандалов и уголовных дел» Сибирские дороги // Трансперенси-Интернешнл - Россия. URL: http://transparency.org.ru/special/dorogisibiri/ (дата обращения: 12.05.2018), - заключают авторы расследования. По итогам расследования авторы создали интерактивную Карту ремонта дорог, на которую нанесены все ремонтные работы в городах с указанием потраченной на них суммы и закупочными документами. При этом, все исходные данные доступны читателям для скачивания в формате json.

Еще один пример антикоррупционного расследования, созданного гражданскими активистами, - проект «Своих не бросаем». Его авторы - участники антикоррупционного хакатона «ДеклараБум», организованного «Трансперенси Интернешнл - Россия». Результатом расследования стал социальный граф, показывающий «миграцию» чиновников из одного государственного органа в другой. Граф иллюстрирует потенциальные случаи конфликта интересов: на нем видны группы людей, которые при смене работы перемещаются на новую должность или в другой регион вместе со своими бывшими коллегами. Для реализации расследования его авторы воспользовались данными базы антикоррупционных деклараций российских государственных служащих «Декларатор». Выгрузив необходимые данные, авторы проекта проанализировали их с помощью скрипта на языке программирования Python, построили социальные графы посредством библиотеки NetworkX. Последним этапом расследования стала визуализация социального графа с помощью инструмента Визуализатор графов, разработанного для журналистов компанией Social Data Hub.

Другой пример антикоррупционного расследования, авторы которого применяли современные инструменты сбора и анализа данных - журналистское расследование Associated Press под названием «Lawmaker with lavish decor billed private planes, concerts» Gillum J., Braun S. Lawmaker with lavish decor billed private planes, concerts // Associated Press. URL: https://apnews.com/e2f1f52c3eb34caca7d74e5bf90f27f9/lawmaker-lavish-decor-billed-private-planes-concerts (дата обращения: 12.05.2018). Его авторы доказывают, что конгрессмен-республиканец из штата Иллинойс Аарон Шок потратил бюджетные средства на полеты на частных самолетах, принадлежащих нескольким «донорам» Республиканской партии, и другие развлечения. Журналисты Associated Press отследили высокие расходы политика благодаря его аккаунту в социальной сети Instagram. С помощью сервисов, извлекающих метаданные из фотографий, журналисты получили информацию о местоположениях, связанных с каждым изображением и сравнили с данными сервиса о движении самолетов FlightAware, а затем сопоставили эти данные с отчетами о финансировании партийной кампании. После сопоставления командировочных расходов и данных о перемещениях политика, журналисты AP сделали вывод о хищении бюджетных средств Аароном Шоком, а уже через месяц после публикации политик объявил о своей отставке.

Расследование «В жертву режиму», опубликованное в интернет-издании Russiangate, посвящено выявлению такой форме коррупции как «откаты»: в нем описан механизм спонсирования «Единой России», при котором компания получает госконтракт только в том случае, если обязуется часть вырученных средств направить на поддержку правящей партии. Источником данных для расследования стали финансовые отчеты политических партий за 2016 год, опубликованные на сайте Центральной избирательной комиссии РФ. Данные были представлены в формате PDF с отсканированными изображениями. Для перевода данных в машиночитаемый вид автор расследованяи использовал такой инструмент как Adobe Acrobat Reader. Следующим этапом сбора данных стала работа с сайтом проекта «Госзатраты»: с помощью API и кода на языке программирования Python автор расследования собрал сведения о государственных контрактах компаний-спонсоров «Единой России». В результате выяснилось, что 61% компаний-доноров «Единой России» 2016 года являются государственными подрядчиками. При этом, 1/6 часть спонсоров «Единой России» (104 компании) после совершения пожертвования партии-лидеру стали заключать больше госконтрактов, чем за все предыдущие годы работы.

Еще один пример использования журналистами в антикоррупционных расследованиях современных инструментов сбора и анализа данных демонстрируют журналисты телеканала «112 Украина» и сообщества расследователей Bellingcat. Их расследование «Дело о прокурорах» связано с бывшим сотрудником Генеральной прокуратуры Украины Александром Бондаренко, которого авторы публикации подозревают в предоставлении недостоверных сведений о доходах. Согласно расследованию, чиновник подарил своему тринадцатилетнему сыну автомобиль марки Ferrari.

Толчком для начала расследования послужила фотография автомобиля, переданная в редакцию анонимным источником. Для дальнейшей работы журналисты использовали открытые источники информации. В частности, авторы расследования извлекли из фотографии метаданные с помощью специальных инструментов. Получив геолокацию снимка, они сравнили установленное местоположение с изображением ресторана «Монако», найденном на сайте Wikimapia. Им удалось выяснить, что автомобиль на фотографии находится в Киеве. На архивном сайте, посвященном автомобилям (autogespot.ru), авторам удалось найти другой снимок автомобиля такого же цвета с номером «Захар» - именем сына Александра Бондаренко.

Журналисты также опирались на данные сведений о доходах экс-прокурора за 2013 год, на основании которых был сделан вывод о том, что их не хватило бы на то, чтобы купить Ferrari. Авторы расследования нашли и другие факты покупки семьей чиновника предметов роскоши: в социальной сети Одноклассники ими журналисты обнаружили аккаунт супруги Бондаренко с фотографиями элитных часов, а также снимки с курортного отдыха. Для того, чтобы установить конкретную геолокацию событий на снимках, журналисты воспользовались сервисом Google Earth, который позволил сравнить найденные фотографии со спутниковыми снимками. С помощью данных открытого источника информации - Публичной кадастровой карты Украины - расследователи установили факт владения Александром Бондаренко загородным участком. «На основании информации из открытых источников и результатов расследования можно утверждать, что движимое и недвижимое имущество Бондаренко, а также предметы роскоши совершенно не соответствуют заявленному годовому доходу его семьи» Толер Э. Ferrari для тринадцатилетнего мальчика, или Роль открытых источников информации в расследовании фактов коррупции в Украине // Bellingcat URL: https://ru.bellingcat.com/materialy/casestudies/2016/11/21/ferrari-for-13-year-old-ru/ (дата обращения: 12.05.2018), - к такому выводу пришли авторы антикоррупционного расследования.

Другой пример - расследование Романа Анина, редактора отдела расследований «Новой газеты» под названием «Секрет Принцессы Ольги» Анин Р. Секрет «Принцессы Ольги» // «Новая газета». URL: https://www.novayagazeta.ru/articles/2016/07/31/69418-sekret-printsessy-olgi (дата обращения: 12.05.2018), посвященное незадекларированным доходам руководителя госкорпорации «Роснефть» Игоря Сечина и на тот момент его супруги Ольги Сечиной, которая является сотрудником государственного банка «Газпромбанк». В своей статье Роман Анин пытается доказать, что семье Сечиных принадлежит одна из самых роскошных яхт в мире «St. Princess Olga». Для проведения расследования журналист использовал новейшие инструменты сбора данных. Так, например, он сравнил детали на фотографиях из аккаунта в социальной сети Instagram супруги Игоря Сечина с фотографиями яхты «St. Princess Olga». «Новая газета» также проанализировала метаданные фотографий - геолокации - и сопоставила их с маршрутами яхты с помощью сервиса Vessel Tracker, который использует данные автоматической идентификационной системы, установленной на судах.

На основе сравнения стоимости яхты и данных решения совета директоров «Роснефти» о заработной плате Игоря Сечина, «Новая газета» делает вывод о том, что расходы госслужащего превышают его официальные доходы и официальные доходы членов его семьи.

Гражданское расследование общественной организации «Транесперенси Интернешнл - Россия» «Распорядители земли Владимирской» Распорядители земли Владимирской // Трансперенси-Интернешнл - Россия. URL: http://transparency.org.ru/special/shokhin/ (дата обращения: 12.05.2018) - пример использования инструментов работы с открытыми государственными данными в антикоррупционном расследовании. Авторы описывают, как власти города Владимира лишают бюджет доходов, закрывая глаза на незаконную деятельность ряда коммерческих предприятий. Авторы «Трансперенси Интернешнл - Россия», опираясь на открытые данные, обнаружили конфликт интересов в деятельности главы администрации города Владимира Андрея Шохина. Они выявили связи чиновника с руководителями владимирских строительных фирм.

Расследователи собрали данные из Единого государственного реестра юридических лиц, реестра зарегистрированных прав на недвижимость Росреестр, а также данные судебных исков. Авторы расследования изучили взаимоотношения Андрея Шохина с владельцами компаний, которым он выделяли землю под строительство. Построив социальный граф и проанализировав связи с помощью инструментов визуализации сетей, они выяснили существование общих политических интересов и родственных связей между государственным служащим и бизнесменами. Благодаря собранным и проанализированным данным, расследователям удалось установить факт конфликта интересов, который привел к убытку бюджета города на сумму около 240 млн рублей.

В заключение главы отметим, что во всех проанализированных примерах авторы демонстрируют владение современными инструментами сбора и анализа данных. Источниками информации становятся российские и зарубежные базы данных, порталы государственных закупок и судебных решений, реестры компаний, реестры зарегистрированных прав на недвижимость, базы антикоррупционных деклараций государственных служащих. В расмматоренных нами примерах антикоррупционных расследований последних лет их авторы задействовали такие инструменты сбора данных, как сервисы мониторинга перемещения судов и самолетов, сервисы, позволяющие выявить активность пользователей в социальных сетях, инструменты извлечения метаданных. Журналисты и гражданские расследователи используют и методы, требующие написания программного кода: такие как API и web-scraping. Не менее часто авторы современных антикоррупционных расследований используют инструменты анализа данных, которые позволяют визуализировать сложные сети и связи.

Заключение

Цель данного исследования заключалась в разработке практических рекомендаций по выбору современных инструментов сбора и анализа данных для антикоррупционных расследований. В начале работы определен терминологический аппарат исследования, рассмотрены принятые в науке определения ключевых понятий - «коррупция», «антикоррупционное расследование», «данные», «открытые данные», «сбор данных», «анализ данных».