Избирательный подход

«Суть в том, чтобы дать всю информацию, которая нужна для оценки вашего вклада, а не только ту информацию, которая приведет к конкретному результату».

Ричард Фейнман

По результатам оценок, в мире уже опубликовано 15 миллионов медицинских статей, и 5000 журналов выходят каждый месяц. Большинство публикаций содержат противоречивые утверждения, и разобраться в том, где правда, очень сложно. Неизбежно люди будут сокращать материал. Мы полагаемся на обзорные статьи, на метаанализы, учебники, слухи или журналистские обзоры по теме.

Это в том случае, если вам нужно добраться до сути проблемы.

А если нужно просто проверить утверждение? Есть, например, несколько настолько странных мнений, что вам не удастся найти доктора наук, готового под ними подписаться; и есть в медицине несколько предположений, настолько нелепых, что вы не сможете подобрать какие-либо опубликованные экспериментальные данные, подтверждающие их, если только не будете притягивать их за уши и выбирать из обширной литературы исключительно то, что вам подходит.

Одно из крупнейших исследований по подбору фактов в академической литературе началось после статьи Лайнуса Полинга (Linus Pauling), прадедушки современной диетологии, и его основополагающей работы по приему витамина С при простуде. В1993 ГОДУ Пауль Книпшилд (Paul Knipschild), профессор эпидемиологии Университета Маастрихта, написал главу в солидный учебник «Систематические обзоры» (Systematic Reviews): он испытал значительные трудности, рассматривая публикации времен Полинга и подвергая их тому же самому строгому разбору, который вы найдете в современной литературе.

Он обнаружил, что Полинг специально выбрал те результаты исследований, которые доказывали преимущества витамина С. Если он ссылался на исследования, не подтверждающие его теорию, то называл их методологически некорректными. Правда, как показали реальные простуды, такими же оказались и статьи, которые он щедро цитировал для подтверждения своего мнения.

В защиту Полинга можно сказать, что он жил в то время, когда люди не знали лучшего выхода, и, возможно, не понимал, что делает. Сейчас тенденциозный подбор доказательств — одна из наиболее частых сомнительных практик в альтернативной медицине, в особенности в диетологии, где он фактически считается нормальным. В действительности «тенденциозный подбор фактов» — это то, что целители называют «альтернативной парадигмой». В классической медицине это тоже встречается, но есть большая разница: здесь это считается серьезной проблемой, и ведутся поиски ее решения.

Решением является «систематический обзор». Вместо того чтобы ходить вокруг да около в онлайне и выбирать самые подходящие статьи, чтобы подтвердить свои предположения и продать продукт, в систематическом обзоре у вас есть четкая стратегия поиска данных (честно описанная в вашей статье, включая даже ключевые слова, которые вы использовали при поиске в базах данных научных статей). Вы берете характеристики всех найденных исследований, дальше (в идеале вслепую по отношению к результатам) измеряете методологическое качество каждого (чтобы понять, насколько это «справедливый тест»), дальше сравниваете альтернативы и потом даете критичное, взвешенное заключение.

Именно так поступает Кохрановское сотрудничество (Cochrane Collaboration) с любой темой по здравоохранению, которую удается найти. Иногда оно даже привлекает к работе посторонних людей, чтобы те поставили новые вопросы. Такой тщательный анализ информации заполнил крупные пробелы в знаниях, он выявил, что «лучшие методы» были иногда убийственно ошибочными, и просто с помощью анализа существующих данных Кохрановскому сотрудничеству удалось спасти больше жизней, чем вы можете вообразить. В XIX веке, как сказал доктор Мюир Грей (Muir Gray), был достигнут большой успех в обеспечении чистой, прозрачной водой; в XXI веке такой же успех нужен в обеспечении ясной, понятной информацией. Систематические обзоры — это одна из великих идей современной мысли. Это нужно отпраздновать.