Глава 30. Когда нужен внешний эксперт и как его выбрать
Депутат физически не может быть специалистом во всех темах, по которым голосует. Ключевой навык — не «знать всё», а знать границу своей компетентности и вовремя позвать того, кто знает. И отличить настоящего эксперта от уверенного болтуна — что сложнее, чем кажется.
Ситуация
Депутату предстоит голосовать по сложному техническому вопросу — скажем, концессионное соглашение по теплосетям с финансовой моделью на 200 страниц. Вариант А: «разберусь сам» — и проголосовать, не поняв и трети, доверившись чьей-то презентации. Вариант Б: позвать независимого эксперта по концессиям, заплатить за анализ, получить разбор рисков. Вариант А дешевле сейчас и катастрофичнее потом. Навык — понять, что это случай для эксперта, и найти правильного.
Три основания
Даннинг-Крюгер (Kruger & Dunning, 1999). В незнакомой области человек не способен оценить ни чужую компетентность, ни свою некомпетентность. Это и делает выбор эксперта трудным: чтобы оценить эксперта, нужна та самая компетентность, которой у вас нет. Выход — оценивать не содержание (вы не можете), а косвенные признаки надёжности.
Калибровка экспертов. Tetlock, 2005 («Expert Political Judgment»). Двадцатилетнее исследование: уверенные, медийные эксперты-«ежи» (одна большая идея на всё) предсказывают хуже, чем осторожные «лисы» (много частных моделей, признают неопределённость). Громкость и уверенность эксперта обратно коррелируют с точностью. Бойтесь того, кто слишком уверен.
Конфликт интересов. Эксперт, чей доход зависит от определённого вывода, — не эксперт, а адвокат. Базовый фильтр: кто платит эксперту и что он выигрывает от того или иного заключения.
Когда звать и как выбирать
Когда звать (триггеры)
(1) Необратимое решение (Глава 8) в незнакомой области; (2) цена ошибки высока; (3) вы не можете назвать трёх возможных рисков решения — значит, не понимаете предмет; (4) все доступные мнения исходят от заинтересованных сторон.
Признак 1. Признаёт границы своего знания
Настоящий эксперт говорит «вот это я знаю точно, а здесь неопределённость» (Tetlock «лиса»). Болтун уверен во всём. Парадоксально: сомнение — признак компетентности.
Признак 2. Объясняет так, что вы понимаете
Настоящий эксперт умеет объяснить суть на вашем уровне. Тот, кто прячется за жаргон и «это слишком сложно для вас» — часто прикрывает пустоту.
Признак 3. Нет конфликта интересов
Не связан с заинтересованными сторонами, доход не зависит от вывода. Лучше — два независимых эксперта с разных сторон.
Признак 4. Проверяемый трек-рекорд
Конкретные прошлые работы, которые можно проверить. Не регалии и не самоуверенность, а проверяемые результаты.
Три практики
«Тест трёх рисков»
Перед решением спросите себя: могу ли я назвать три конкретных риска этого решения? Если нет — это сигнал звать эксперта, а не голосовать «на доверии».
«Двое с разных сторон»
По важным вопросам зовите двух экспертов с потенциально разными интересами. Там, где они сходятся, — твёрдая почва; где расходятся — зона вашего внимания.
«Фильтр уверенности»
Эксперта, который уверен во всём и говорит, что «всё просто», — перепроверяйте особенно тщательно (Tetlock). Эксперта, который честно очерчивает неопределённость, — слушайте внимательнее.
Как работает
Свой пример (анонимизированный). Депутату предстояло голосование по концессии на водоснабжение — финансовая модель, которую он не понимал. Соблазн был проголосовать «как профильный комитет рекомендует». Вместо этого нашёл независимого эксперта по ГЧП (не связанного с участниками), заплатил за разбор. Эксперт указал на три риска в модели, которых не было в презентации. Депутат внёс поправки-предохранители как условие поддержки. Через два года один из рисков реализовался — и был залимитирован именно этими поправками. Стоимость экспертизы окупилась многократно.
Контрпример. Тот же депутат годом раньше по другому вопросу доверился «уверенному» консультанту, который «знал всё» и говорил, что «там всё просто». Решение оказалось провальным. Урок Tetlock на собственной шкуре: уверенность консультанта была обратно пропорциональна его реальной компетентности.
Сигналы работы: вы различаете «знаю / не знаю»; по сложным необратимым вопросам зовёте независимых экспертов; цените сомнение эксперта выше его уверенности; проверяете конфликт интересов. Сигналы поломки: «разберусь сам» в незнакомых областях; доверяете самым уверенным; не проверяете, кто платит эксперту; голосуете «как рекомендуют», не поняв сути.
Ловушки: (1) брать эксперта, подтверждающего то, что вы и так хотите (Глава 12, подтверждение); (2) принять регалии за компетентность; (3) спрятаться за экспертом от собственной ответственности — эксперт советует, решаете и отвечаете вы; (4) другая крайность — звать экспертов на всё, теряя способность решать самому (Глава 8).
Источники
- Kruger, J., & Dunning, D. (1999). Unskilled and unaware of it. JPSP, 77(6), 1121–1134.
- Tetlock, P. E. (2005). Expert Political Judgment: How Good Is It? How Can We Know? Princeton UP. — «лисы» vs «ежи», уверенность обратна точности.
- Связь с обратимостью решений — Глава 8 (Bezos two-way doors).
Андрей Мейстер · meysternlp.ru