Читать книгу «Тирания показателей» онлайн полностью📖 — Джерри Мюллера — MyBook.
image
cover

Все права защищены. Данная электронная книга предназначена исключительно для частного использования в личных (некоммерческих) целях. Электронная книга, ее части, фрагменты и элементы, включая текст, изображения и иное, не подлежат копированию и любому другому использованию без разрешения правообладателя. В частности, запрещено такое использование, в результате которого электронная книга, ее часть, фрагмент или элемент станут доступными ограниченному или неопределенному кругу лиц, в том числе посредством сети интернет, независимо от того, будет предоставляться доступ за плату или безвозмездно.

Копирование, воспроизведение и иное использование электронной книги, ее частей, фрагментов и элементов, выходящее за пределы частного использования в личных (некоммерческих) целях, без согласия правообладателя является незаконным и влечет уголовную, административную и гражданскую ответственность.

Посвящается Питеру Догерти

Те, кто считает, что всё не поддающееся количественной оценке просто не существует, уверены в существовании всего, что можно представить количественно.

ААРОН ХАСПЕЛ


Показанный кабельным каналом HBO сериал «Прослушка» (The Wire) основан на реальном опыте создателей, Дэвида Саймона и Эда Бернса. Его считают одним из величайших достижений современной культуры, и для этого есть веские основания. Хотя действие в нем разворачивается в одном американском городе, а именно в Балтиморе, сериал раскрывает деятельность важнейших институтов общества — полиции, школ, муниципальной администрации и средств массовой информации. Сериал — своего рода рентгенограмма работы этих институтов и ее негативных аспектов. Он вызывает интерес и за пределами США, поскольку поднятые в нем проблемы актуальны для всех западных стран.

Одна из сквозных тем сериала — значимость, которую придают количественным показателям, или оценке результативности, как центральному звену «учета». Полицейское начальство не видит ничего, кроме цифр — количества раскрытых дел и задержанных торговцев наркотиками, уровня преступности и т.п., — и жертвует эффективностью ради хорошей статистики. Цифры нужны политикам, которые хотят видеть успехи полиции в борьбе с преступностью. Поэтому в отделениях полиции делают всё, лишь бы избежать регистрации убийств на своих участках: когда шайки наркоманов подбрасывают трупы в заброшенные дома, сержант убойного отдела не горит желанием обнаружить их — это ведь снизит «уровень раскрываемости», то есть процент раскрытых преступлений. В центре сюжета находятся преданные своему делу детективы, которые хотят раскрутить сложное уголовное дело против крупного наркобарона. Но на расследование нужны месяцы, если не годы, а с точки зрения руководства, лучше вылавливать побольше мелкой рыбешки и, таким образом, повышать показатели работы. Городская администрация требует, чтобы к концу года уровень серьезных преступлений снизился на 5%, а достичь этого можно только ценой отказа от регистрации реальных преступлений или занижения их тяжести. И то и другое — не что иное, как «приукрашивание статистики», то есть улучшение показателей за счет искажения реальных данных или траты времени и сил не на предупреждение преступлений, а на менее продуктивную работу.

Другая сюжетная линия связана с бывшим полицейским, который преподает в средней школе в районе для бедных, где много неполных семей и распространена наркомания. В школе низкая успеваемость, и, если результаты экзаменов не улучшатся, ее могут закрыть. Так вот, за шесть недель до стандартизированных тестов по чтению и письму директор школы дает учителям указание заниматься только подготовкой к тестам, а об остальных предметах просто забыть (эту стратегию обозначают эвфемизмом «подстраивание учебного плана»). «Натаскивание на тест», как и приукрашивание статистики, это способ введения в заблуждение, поскольку силы направляются не на истинную цель (общеобразовательную подготовку), а на достижение целевых показателей, от которых зависит существование учреждения.

Извращающий идею эффект применения показателей результативности наблюдается и по другую сторону Атлантики, в Великобритании1. Там то же самое явление показано в телесериале «Тела» (Bodies), сценарий для которого написал Джед Меркурио, бывший врач. Его действие разворачивается в отделении акушерства и гинекологии крупной городской больницы. В первой серии недавно приехавший в город хирург делает сложную операцию пациентке, которая в результате умирает. Соперник этого врача дает ему такой совет: «Высококлассный хирург должен, опираясь на свой опыт, избегать ситуаций, опасных для его репутации». Другими словами, он советует избегать тяжелых случаев, чтобы поддерживать высокий процент успеха. Это классическая стратегия «снятия сливок», то есть избегания рискованных случаев, которые могут отрицательно сказаться на показателе результативности. Цена этого подхода такова: пациентов с высоким риском неблагоприятного исхода просто оставляют без хирургической помощи.

«Тела» — художественное произведение, но явления, о которых в нем говорится, вполне реальны. Многочисленные исследования показывают, что при оценке хирургов или их вознаграждения на основе процента успешных операций часть из них отказывается оперировать пациентов в тяжелом или критическом состоянии. Исключение сложных случаев, связанных с высоким риском, улучшает результаты работы хирургов и, соответственно, повышает репутацию и заработки. Разумеется, все это достигается за счет исключенных пациентов, которые платят за успех хирургов своей жизнью. Но потеря этих жизней ни в чей показатель результативности не входит.

Игра с цифрами идет во всех сферах: в охране правопорядка, в образовании, в здравоохранении, в некоммерческих организациях и, конечно же, в бизнесе. При этом игра с цифрами — лишь одна из проблем, неизбежно возникающих, когда показатели результативности используются как основа для вознаграждения или взыскания. Есть вещи, которые можно измерить. Есть вещи, которые полезно измерять. Но поддающееся измерению не всегда оказывается тем, что нужно измерять. Измеряемое может не иметь никакого отношения к тому, что мы на самом деле хотим узнать. Затраты на измерения могут превышать приносимую пользу. Измерения могут отвлекать нас от действительно важных вещей. К тому же измерения могут давать превратное представление, которое выглядит обоснованным, а на самом деле вводит в заблуждение.

Мы живем в век отчетности, вознаграждений за результаты деятельности и веры в благо раскрытия количественных показателей в соответствии с политикой «прозрачности». Но отождествление отчетности с количественными показателями и прозрачностью вводит в заблуждение. Под отчетностью следует понимать ответственность человека за свои действия. Но в результате передергивания отчетность стала означать демонстрацию успехов с помощью стандартных показателей, словно значение имеет только то, что можно подсчитать. Другая исходная посылка (ее часто принимают как само собой разумеющуюся) гласит: «Отчетность требует, чтобы результаты деятельности были открытыми для общественности, то есть прозрачными».

От зацикленности на количественных показателях — прямой путь к оценке результатов деятельности, их публикации и использованию для определения размера вознаграждения зачастую вопреки свидетельствам того, что такой подход не слишком адекватен.

При должном использовании количественные оценки — хорошее дело, точно так же, как и прозрачность. Вместе с тем они могут приводить к искажениям, к отвлечению внимания и ресурсов, к подменам, к рассеиванию сил и разочарованиям. Хотелось бы, конечно, жить в эпоху измерений, однако на деле это эпоха неправильных, избыточных, лукавых и контрпродуктивных измерений. Эта книга не о пороках измерения, она о непреднамеренных негативных последствиях попыток подменить основанные на опыте и знаниях суждения стандартными показателями результативности. Проблема не в измерениях, а в их чрезмерности и неадекватности — не в количественных показателях, а в патологической зацикленности на них.

Нам часто говорят, что сбор показателей результативности и их открытая публикация позволяют улучшить функционирование наших институтов. Причем нигде не расхваливают пользу учета, показателей результативности и прозрачности сильнее, чем в сфере здравоохранения. Это и понятно, ведь ни от одной другой сферы не зависит так много. Помимо того, что на сектор здравоохранения приходится более 17% ВВП США, в нем в буквальном смысле решаются вопросы жизни и смерти. Если следовать логике, то измерение результативности должно помогать экономить деньги и спасать жизни.

Считается, что сбор данных о проценте успешных операций, или о коэффициенте выживаемости пациентов по больницам, полезен. Если государственные ведомства или частные страховые компании платят врачам или больницам в зависимости от процента успешных операций, это повышает их заинтересованность в повышении качества обслуживания. А если данные о результатах деятельности открыто публикуются, то это помогает людям выбирать врачей и больницы. Таким образом, количественные показатели, отчетность и прозрачность становятся средством устранения недостатков в здравоохранении. Что тут может быть не так?

Как мы уже видели, «не так» может быть очень многое. Когда в основу системы вознаграждения и мотивации кладут количественные показатели, хирурги, как и другие специалисты под жестким контролем, начинают заниматься «снятием сливок», то есть просто избегать рискованных случаев. Если больницы наказывают за высокий процент пациентов, умерших в течение 30 дней после операции, то делается все, чтобы пациенты продержались 31 день и не портили показателей2. В Англии Министерство здравоохранения в попытке сократить время ожидания помощи в отделениях неотложной помощи решило наказывать больницы, где ждать приходилось больше четырех часов. Программа оказалась успешной, по крайней мере внешне. На самом деле некоторые больницы стали держать поступающих пациентов за пределами своих стен в машинах скорой помощи до тех пор, пока персонал не убедится в том, что уложится в отведенные четыре часа3.

К здравоохранению мы еще вернемся, однако характерные для него проблемы возникают и во многих других сферах — в школьном и среднем специальном образовании, в охране правопорядка и других госуслугах, в бизнесе и финансах, в благотворительных организациях. Работающие в этих отраслях неизбежно должны чувствовать их существование. Социологи препарируют эти проблемы в отдельно взятых областях. При этом, однако, из виду ускользает, что те же самые негативные последствия использования показателей результативности, отчетности и прозрачности вновь и вновь проявляются во множестве других институтов4.

Стоит лишь затронуть проблему зацикленности на количественных показателях, и она начинает вылезать повсюду, а не только в телесериалах.

Куда ни глянь, повсеместно наталкиваешься на количественные показатели. Ngram, онлайн-сервис Google, мгновенно просматривающий тысячи отсканированных книг и других публикаций, позволяет составить примерную, но красноречивую картину изменений в нашей культуре и обществе. Задайте годы и слово или фразу — и получите график, показывающий частоту встречаемости слов в текстах, созданных с 1800 г. до нынешнего дня. Введите слово «отчетность» и увидите линию, которая поворачивает вверх примерно в 1965 г., а после 1985 г. поднимается все круче. Такой же график будет и у слова «показатели»: после 1985 г. линия резко идет вверх. Аналогичными оказываются графики для понятий «контрольные ориентиры» и «индикаторы эффективности».

В книге приводятся доказательства того, что, несмотря на потенциальную ценность этих инструментов, достоинства построенной на количественных показателях отчетности преувеличены, а затраты на ведение такой отчетности занижены. Она предлагает этиологию и диагноз, а также прогноз лечения зацикленности на количественных показателях и снятия болезненных симптомов.

Самая характерная особенность зацикленности на количественных показателях — стремление заменить основанные на опыте суждения стандартизированными оценками. Суждения считаются личными, субъективными и предвзятыми, а количественные показатели — достоверными и объективными. Стратегия заключается в повышении эффективности институтов путем вознаграждения тех, у кого показатели самые высокие или достигнуты установленные ориентиры, и наказания отстающих. Политика, в основе которой лежат эти идеи, проводится уже несколько десятилетий, и, как показывают графики Ngram, небезрезультатно.

Разумеется, во многих ситуациях решения, принимаемые на основе стандартных показателей, лучше решений на основе личного опыта и знаний. Решения, основанные на анализе больших данных, полезны, когда опыт отдельно взятого практика слишком ограничен для интуитивного понимания причин и надежной оценки эффективности. Например, когда врач сталкивается с симптомами редкого заболевания, ему лучше полагаться на стандартизированные критерии, выработанные в результате обобщения множества случаев. Контрольные листы (стандартные процедуры, устанавливающие порядок действий) оказываются ценными в таких разных сферах, как авиаперевозки и здравоохранение5. Как отмечается в книге «MoneyBall. Как математика изменила самую популярную спортивную лигу в мире»[1], статистический анализ иногда выявляет измеримые, но не учитываемые характеристики, которые оказываются более важными, чем следует из интуитивных представлений, опирающихся на опыт6.

Иначе говоря, измерение того, что ранее не измеряли, если пользоваться такими измерениями с разумной осторожностью, может приносить реальные выгоды. Попытка измерить результаты деятельности, хотя, как будет показано, и сопряжена с неприятными неожиданностями, по сути своей желательна. Если фактически измеряемое является приемлемым индикатором того, что нужно измерять, и если измерение не отменяет суждения, то это может помочь практикам в оценке результатов деятельности — как на индивидуальном уровне, так и на уровне организаций. Проблемы начинаются, когда количественные показатели становятся критериями для поощрения и наказания, то есть когда количественные показатели становятся основой для выплат по результатам или для тарификации.

Схемы оценки результативности обманчиво привлекательны потому, что они нередко «доказывают» свою полезность, раскрывая вопиющие ошибки или упущения. Как следствие, их начинают применять везде. Инструменты, подходящие для выявления действительно плохого выполнения обязанностей, становятся инструментами измерения всех результатов. В первый момент измерение результативности может заставить исправиться тех, кто работает плохо, или вытеснить плохих работников с рынка. Но во многих случаях при расширении применения стандартизированные измерения теряют полезность и даже становятся вредными, превращаясь из разумного решения в безумное. Измерения контрпродуктивны прежде всего при попытках измерить неизмеримое и количественно оценить неисчислимое.

Речь идет о власти, деньгах и статусе. Зацикленность на количественных показателях ведет к перетоку ресурсов от занятых производительной деятельностью к менеджерам, администраторам и тем, кто собирает данные и манипулирует ими.

Использование количественных показателей для контроля зачастую рождает конфликт между стремлением руководства измерять результативность и вознаграждать за нее и профессиональной гордостью специалистов (врачей, медсестер, полицейских, преподавателей и т.д.). В основе профессиональной гордости лежат знания, полученные в результате долгого обучения, она предполагает самостоятельность в работе, принадлежность к определенной профессиональной группе и чувство ответственности перед коллегами, высокую ценность внутреннего вознаграждения и преданность интересам клиентов7.

Такой конфликт иногда необходим и желателен, поскольку профессионалы склонны закрывать глаза на затраты и возможности их снижения. Другими словами, они склонны видеть только выгоды наращивания объема своих услуг, не обращая особого внимания на ограниченность ресурсов или преимущества их альтернативного использования. Профессионалы не любят думать о затратах в отличие от тех, кто занимается измерениями и учетом. Сотрудничество этих групп может принести удовлетворение обеим сторонам, а их противоборство — конфликт и снижение морального духа.

Несмотря на существование интересов, превращающих разумный учет количественных показателей в безумие, причина сложившейся ситуации кроется в не меньшей мере в некритическом принятии идеологии измерений. Как и любая другая культура, культура количественного учета имеет свои сакральные условности и характерные слепые зоны8. Так или иначе, сегодня эта культура господствует настолько, что ее изъяны остаются незамеченными.

Возникает вопрос: «С чего это вдруг историк взялся за такую тему — зацикленность на количественных показателях?» Дело в том, что проблема, с которой я столкнулся в своей профессиональной деятельности, оказалась частью намного более широкой проблемы нашего общества. Осознание того, что перекосы в моей узкопрофессиональной вотчине характерны для многих современных институтов, превратило микровозмущения в макроанализ.

Окунуться в тему мне пришлось как заведующему кафедрой в частном университете. У заведующего кафедрой много задач: надо следить за работой преподавателей и способствовать их развитию как ученых и наставников; принимать на работу новых преподавателей; обеспечивать преподавание необходимых курсов; поддерживать отношения с деканами и другими представителями администрации университета. Все это ложилось на мои плечи сверх других обязанностей как члена профессорско-преподавательского коллектива — преподавания, исследовательской работы и поддержания профессионального уровня. Я воспринимал это как вполне естественное положение вещей. Работа с преподавателями давала свои результаты и помогала моим подчиненным совершенствоваться. Я гордился разнообразием и качеством курсов, которые мы читали, а отношения с другими кафедрами были отличными. Преподавание, исследования и подготовка статей и книг — занятия, которые требуют немалых усилий, но приносят удовлетворение.

Премиум

4 
(13 оценок)

Читать книгу: «Тирания показателей»

Установите приложение, чтобы читать эту книгу

На этой странице вы можете прочитать онлайн книгу «Тирания показателей», автора Джерри Мюллера. Данная книга имеет возрастное ограничение 12+, относится к жанрам: «Зарубежная деловая литература», «Личная эффективность». Произведение затрагивает такие темы, как «решение проблем», «как достичь цели». Книга «Тирания показателей» была написана в 2018 и издана в 2019 году. Приятного чтения!