Необходимо также учесть сложности, которые встречаются в эмпирическом анализе. Одна из таких проблем касается учета искажающих факторов. Для того чтобы определить, склонны ли судьи выносить разные приговоры чернокожим и белым мужчинам или выносить разные приговоры мужчинам и женщинам, легко сравнить средние сроки тюремного заключения по расовым или гендерным категориям (гл. 13). Вы, скорее всего, обнаружите, что у чернокожих мужчин более длительные сроки тюремного заключения, чем у белых мужчин, а сроки тюремного заключения у мужчин длиннее, чем у женщин. Но есть два очевидных искажающих фактора (среди нескольких прочих), которые также влияют на длительность тюремного заключения и должны быть приняты в расчет: серьезность преступления правонарушителя и его криминальное прошлое. Если группа, которая получает более длительные сроки тюремного заключения, в среднем также совершает более серьезные преступления и имеет более богатое криминальное прошлое, то возможно, именно эти факторы играют решающую роль в объяснении длительности сроков тюремного заключения. Важно отметить, что эти искажающие факторы не исключают возможности судейской предвзятости. Напротив, учет этих факторов позволяет исследователю быть более уверенным в том, что результат можно объяснить с помощью рассматриваемой переменной, например, предвзятости судей, а не этими другими факторами.

Другая проблема, которая часто встречается в эмпирическом анализе, – это обратная причинно-следственная связь. Одно простое предсказание в борьбе с преступностью утверждает, что если нанять больше сотрудников полиции, то уровень преступности упадет (гл. 10). Причинно-следственная связь, поэтому, такова, что большее число полицейских приводит к меньшему числу преступлений. С другой стороны, несложно также предсказать, что если повысится уровень преступности, могут быть наняты дополнительные сотрудники полиции. Теперь причинно-следственная связь такова: большее число преступлений приводит к большему числу полицейских. Без правильного учета подобной обратной причинно-следственной связи исследование, пытающееся определить, является ли наем сотрудников полиции разумным подходом к сдерживанию преступности, может обнаружить, что большее число полицейских ведет к росту преступности. Но этот результат может возникнуть из-за обратной причинно-следственной связи, а не из-за того, что было опровергнуто предсказание о том, что рост числа полицейских приведет к снижению преступности.

Подобные проблемы хорошо известны всем, кроме совсем уж неумелых исследователей, поэтому случаи, когда на них не обращают внимания в эмпирических исследованиях, редки. Реальная проблема заключается в том, что могут быть разногласия по поводу того, какие из искажающих факторов наиболее важны и должны быть учтены, а также как именно нужно исправлять проблему обратной причинно-следственной связи. Одновременно с другими проблемами, рассмотренными выше, существуют и искренние различия в том, как исследователи подходят к эмпирическому анализу, которые регулярно приводят к неоднозначным результатам по многим, если не по всем, социальным вопросам. Но может быть и еще хуже. Что если предвзятость исследователя недобросовестна?

Рассмотрим следующие гипотетические ситуации:

1. Американская ассоциация звукозаписывающей промышленности финансирует исследование, которое приходит к выводу, что обмен музыкальными файлами подрывает музыкальную индустрию.

2. Американская медицинская ассоциация финансирует исследование, которое в конце концов выясняет, что реформа деликтного права, уменьшающая бремя ответственности за врачебную ошибку, улучшает состояние здоровья пациентов.

3. Группа, выступающая в поддержку смертной казни, финансирует исследование, которое в конечном счете обнаруживает, что вынесение смертных приговоров уменьшает число убийств.

Насколько вы доверяете результатам этих исследований? Доверяли бы вы больше этим результатам, если бы они не финансировались этими группами?

Иногда ученых, занимающихся эмпирическими исследованиями, критикуют за то, что на них оказывает влияние их источник финансирования. Но даже без стороннего финансирования предвзятость исследователя все еще может влиять на эмпирическое исследование. Если исследователь, не получающий финансирования и поддерживающий смертную казнь, выясняет, что смертный приговор уменьшает число убийств, должен ли быть оставлен без внимания этот результат? Если тот же исследователь обнаруживает, что смертный приговор не снижает числа убийств, следует ли относиться к этому результату с большей серьезностью, чем в случае, когда он получен другим исследователем, про которого известно, что он занимает нейтральную позицию? Насколько важно оценивать предвзятость исследователя, каковы бы ни были ее причины, для определения чистоты эмпирических результатов?

Сложность в учете предвзятости исследователя не в том, что она может оказаться проблемой, но в том, что она всегда может быть проблемой. Можно ли быть до конца уверенным, что исследователь совершенно непредвзят? Конечно, целесообразным было бы требовать от исследователей, чтобы те раскрывали источники своего финансирования, если таковые имеются, но еще важнее, чтобы исследователи открыто сообщали о своих данных. Повысить доверие к результатам эмпирических исследований можно, если дать другим возможность проверить чистоту данных, воспроизвести результаты и протестировать надежность результатов с помощью различных статистических операций. Для этих целей важно, чтобы исследователи обменивались данными.

У исследователей всегда была возможность сделать свои данные доступными для других, но до недавнего времени их редко заставляли делать это. В настоящее время нет сложностей с передачей больших компьютерных файлов, и многие научные журналы теперь в качестве условия публикации требуют от исследователей, чтобы те передавали свои данные. Рассмотрим, к примеру, заявление редакторов журнала Journal of Law and Economics, ведущего журнала в этой области:

Хотя подобные меры и могут сделать менее острой проблему необъективности исследователей, но они не способны помочь в случае отсутствия согласия, которое является обычным следствием эмпирических исследований. Однако важно заметить, что разногласия по поводу этапа 2 практически не снижают ценности экономической логики. Есть обоснованные и бурные разногласия по поводу того, как измерять соотношения издержек и выгод, но это просто неизбежное следствие самого характера эмпирической работы. Любая научная дисциплина, которая пытается применять эмпирический анализ к политическим вопросам, будет вынуждена столкнуться с теми же проблемами.

Этапы 1 и 2 обычно являются неотъемлемыми частями этапа 3, политического этапа, но не наоборот. Экономический анализ, даже анализ правовых норм «реального мира», не обязательно должен включать явный политический элемент. Предположим, к примеру, что вы хотите выяснить, может ли смертная казнь сдерживать убийства. Вы понимаете, что необходимо учесть большое число издержек и выгод при анализе смертного приговора, но вы хотите сосредоточиться только на его выгодах в качестве сдерживающего фактора. Вы начинаете с этапа 1.