Та же самая проблема возникает и при проведении сравнения лекарств. Может наблюдаться неожиданный, мгновенный, кратковременный полезный эффект, скажем, от лекарства для похудения, который со временем снижается и сводится к нулю. Или же могут возникать кратковременные положительные эффекты и долговременные побочные, которые можно отследить только при более длительном наблюдении за пациентами. Так, например, препарат для похудения «Фенфен» вызывал снижение веса при весьма успешных кратковременных исследованиях, но когда принимающие его пациенты наблюдались на протяжении более длительных сроков, таблетки начинали негативно сказываться на состоянии сердечных клапанов.11 Бензодиазепин, лекарство вроде валиума, очень хорош для устранения чувства тревоги в короткие сроки. Исследование, длившееся 6 недель, выявило огромный положительный эффект от него, однако на протяжении последующих месяцев и лет положительное действие снижалось, и пациенты привыкали к препарату. Такие нежелательные явления, проявляющиеся в долгосрочной перспективе, можно обнаружить только во время проведения долговременных исследований.
Однако это не означает, что длительные исследования автоматически выигрывают по сравнению с кратковременными. Все дело в клиническом вопросе, на который вы ищете ответ, или, может быть, пытаетесь уйти от него. Если вы имеете дело с таким дорогим противораковым препаратом, как «Герцептин», вам наверняка захочется узнать, будет ли лечение этим лекарством в течение короткого периода так же эффективно, как и на протяжении более долгого временного отрезка, чтобы не покупать много таблеток без особой надобности и не подвергаться при этом воздействию побочных эффектов в течение более длительного времени. Чтобы узнать это, нужно провести быстрые исследования или, по меньшей мере, исследования с результатами, собранными в течение долгого периода наблюдения, но после проведения не очень длительного лечения. Roche подала заявку на лицензию на «Герцептин», предоставив данные по 12-месячным исследованиям. В Финляндии проверка лекарства проводилась только 9 недель. Обнаружился значительный положительный эффект от препарата, и ведомство Новой Зеландии, аналогичное NICE (Национальный институт здравоохранения и качества медицинской помощи), решило согласовать 9-недельный курс лечения для раковых больных. Компания Roche в свою очередь аннулировала результаты кратковременного исследования и организовала новые продолжительностью 2 года. Как вы догадываетесь, если нам хочется узнать, являются ли 9 недель лечения «Герцептином» такими же эффективными, как лечение тем же препаратом в течение 12 месяцев, нужно провести несколько исследований для сравнения режимов этих двух видов лечения. Спонсирование подобных мероприятий — часто рискованное и смелое предприятие.
Исследования, прекращающиеся раньше срока
Если исследования прекращаются раньше или позже намеченной даты, потому что проводящие их специалисты следят за результатами и выбирают наиболее подходящие по мере их поступления, шансы получить удовлетворительные для организаторов данные повышаются. Это происходит благодаря случайным колебаниям в числовых показателях. Речь идет о несколько усложненном способе, как можно повысить свои шансы выиграть в «орел — решку», используя вышеупомянутую стратегию: «Бросаем! Так, две из трех. Бросаем! Три из пяти? Бросаем! Пять из семи».
Снова и снова мы будем возвращаться в этой книге к одному и тому же принципу: если создать такую ситуацию, при которой у исследователя будет много шансов получить положительный результат, но использовать статистические тесты, предполагающие, что была лишь одна возможность, то можно очень сильно повысить вероятность получения ложноположительного результата. В этом состоит суть проблемы, с которой сталкиваются люди, скрывающие отрицательные результаты. Аналогичная проблема наблюдается и при выборе метода анализа результатов исследований, данные которых не были сокрыты.
Например, если подбрасывать монетку достаточно долго, то очень скоро можно дождаться, когда выпадут четыре орла подряд. Это не одно и то же, если сказать: «Сейчас я брошу монетку и выброшу четыре орла подряд» и сделать это. Мы знаем, что временной промежуток, в течение которого были собраны данные, позволяет выбрать ряд привлекательных для исследователя результатов, и это, как мы тоже знаем, приведет к созданию неправильного представления о лекарстве и неверному толкованию данных.
В исследовании CLASS на протяжении шести месяцев сравнивали новое обезболивающее под названием целекоксиб с двумя старыми препаратами. При приеме нового лекарства наблюдалось меньше проблем с желудочно-кишечным трактом, поэтому его прописывало все больше врачей. Годом позже выяснилось, что изначально планировалось провести еще одно исследование продолжительностью в один год. В течение более длительной проверки целекоксиб не подтвердил свою эффективность, но когда в отчет были включены только результаты за шесть месяцев, препарат засиял во всем великолепии. Именно эти результаты и были указаны в научной статье для публикации.
Нужно признать, что прекращение исследований раньше срока иногда может быть обоснованным. Например, часто прекращают проверку, если у пациентов двух различных групп наблюдаются очень весомые и явные различия в проявленном положительном эффекте, особенно если разница такая большая, такая недвусмысленная и информативная, что даже если отнести ее на счет побочных эффектов, ни один терапевт в здравом уме не продолжит прописывать неудачное лекарство и никто не станет пробовать дать его пациенту снова.
Однако тут надо быть очень осторожным. Некоторые ужасно искаженные данные просочились в науку благодаря людям, которые слишком полагались на такие случайно полученные результаты. Например, исследования по изучению свойств бисопролола во время сосудистой хирургии были остановлены раньше срока, когда в одной группе пациентов сильный сердечный приступ случился всего у двоих, а в контрольной группе, принимавшей плацебо, — у 18 человек. Был сделан вывод, что похоже, препарат очень эффективный и спасает жизни людей, поэтому в рекомендации по лечению были внесены соответствующие поправки. Но когда начали возникать подозрения, что во время предыдущих тестирований полезные свойства препарата были завышены, провели два новых больших исследования, которые обнаружили, что от бисопролола на самом деле не было никакой пользы.12 Первоначальные результаты оказались неверными и заставили исследователей прекратить проверку раньше срока после череды смертей, произошедших по случайному совпадению.
Здесь нужно прояснить, что комитет по этике, контролирующий проведение исследования, может сам иногда потребовать остановить проверку раньше срока, а проверка данных во время исследования представляет собой сложный этический вопрос. Если врачу кажется, что нашлись факты, подтверждающие наличие вреда от того или иного препарата, до окончания исследований (или же сходный этический вопрос — если обнаружено, что один препарат гораздо лучше другого), нужно ли в таком случае продолжать подвергать пациентов воздействию лекарства, которое может представлять серьезную опасность, только для того, чтобы дойти до конца, либо же отнести эти результаты на счет случайного совпадения? И нужно ли закрывать всю лавочку и завершать исследования, при этом зная о существовании потенциальной возможности, что такие случайные результаты могут попасть в медицинские статьи и создать неверное впечатление о лекарстве, а на их основе будут приниматься неверные решения о лечении больных в будущем? Особенно это беспокоит, если вспомнить, что после сокращенных исследований все равно нужно проводить более масштабные и длительные, подвергая риску новых людей, только для того чтобы проверить, были ли результаты аномальными.
Одним из способов, как можно уменьшить нежелательные последствия, вызываемые досрочным прекращением исследований, является разработка правил остановки экспериментальных работ, которые должны быть внедрены еще в самом начале. Эти правила должны быть тщательно разработанными и достаточно строгими, чтобы исключить возможность их применения при возникновении случайной вариации данных, которую можно наблюдать в любом исследовании на каком-нибудь этапе его проведения. Такие правила полезны, так как они ограничивают степень влияния человеческого суждения, которое может быть необъективным и предвзятым.
Однако какие бы мероприятия ни проводились для сокращения последствий от досрочных прекращений исследований, они все равно будут приводить к загрязнению данных. В обзоре от 2010 года были рассмотрены около 100 прерванных исследований и 400 сходных исследований, проведенных до конца в соответствии с планом. Результаты остановленных раньше срока исследований были лучше и завышали эффективность проверяемых лекарств примерно на четверть.13 При проведении другого недавнего обзора выяснилось, что количество исследований, остановленных раньше срока, удвоилось с 1990 года,14 что не очень хорошая новость. В любом случае к результатам исследований, остановленных раньше срока, нужно относиться по меньшей мере с большой долей скепсиса. В особенности потому, что в вышеупомянутых систематических обзорах отмечается, что исследования были прекращены досрочно без указания каких-либо причин.
