Систематическая ошибка

Для того, чтобы избежать субъективности в оценках, выносимых по рентгенограммам, оценке текстов или собеседованиям (интервью), традиционно применяется прием повторной оценки одного и того же объекта разными людьми. Если это проводится без обеспечения независимости, то результаты таких повторных оценок будут искусственно согласованы. Например, если психиатр-консультант знаком с мнением коллег, уже исследовавших пациента, то мнение консультанта будет находиться под влиянием этого мнения и, в обычных обстоятельствах, согласовано с ним. Для обеспечения независимости всякая параллельная оценка должна проводиться без знания оценивающим результатов работы других специалистов. Например, независимая оценка рентгенограммы очень часто приводит к несогласию врачей, настолько часто, что врачи, никогда не принимавшие участия в такой работе, не могут этого себе представить – примерно в половине случаев.[28] Это справедливо для оценок ЭКГ и всех других измерений.[29,30] При изучении опубликованных статей обычно кажется ясным, что в них написано. Однако при выписывании из статей их результатов в таблицы для обобщения в систематическом обзоре оказывается, что два врача при чтении статей выписывают разные результаты! Существенные расхождения в извлечении содержания статьи возникают в каждом третьем случае. Лишь при целенаправленной тренировке – оценке статей и затем сравнении результатов – можно добиться того, что частота расхождений снижается примерно до 1/10.

Метод ослепления (маскирование). Для того, чтобы сравниваемые результаты измерения были по-настоящему независимыми, специалисты, проводящие измерение, должны работать, не зная результатов работы друг друга до момента завершения каждого случая. По его завершении результаты должны сравниваться, и в случае обнаружения расхождения это расхождение преодолеваться. Для этого существуют специальные процедуры. Простейшая состоит в ознакомлении с результатами параллельной оценки и обсуждении расхождения. Если расхождение связано с тем, что один из участников процесса упустил некую информацию, деталь, то легко возникает согласованное мнение. В некоторых случаях этого недостаточно и разрабатывается процедура с приглашением третьего специалиста, который, например, знакомится со всеми результатами и выносит свое решение, или, в свою очередь, принимает участие в голосовании. Иногда эти правила принятия согласованного мнения могут быть более сложными.

Метод ослепления – основной метод создания одинаковых групп для сравнения и обеспечения одинакового ведения пациентов. Всякий раз, когда о пациентах известно хоть что-нибудь, то отношение к ним становится соответствующим. Это вытекает из самой природы человеческих отношений. Мужчина и женщина, бедный и богатый, здоровый и больной не могут и не должны рассчитывать на то, что к ним будет совершенно одинаковое отношение. Эти особенности отношений не только создают «атмосферу», но и влияют на то, что делают медицинские и немедицинские специалисты. В изучении медицинских вмешательств идея о том, что сравнивать два вмешательства можно только в том случае, когда их применяли к одинаковым пациентам, уходит в прошлое по крайней мере на 200 лет. Беда заключалась в том, что в эти давние времена было неизвестно, что делать, если сравниваемые группы несравнимы. И сегодня врач, собрав данные о лечении пациентов одной болезнью разными методами, например, рентгеновским излучением и протонным, обнаруживает, что группа пациентов, которых облучали пучком протонов, отличается от тех, кого облучали рентгеновскими лучами меньшим размером опухоли.[31]

Можно ли по исходам лечения сделать вывод о том, какое облучение эффективнее? Конечно же – нет. Исключение составляют случаи, когда эффект в сравниваемых группах различается многократно (см. выше – влияние вмешивающихся факторов обычно не очень велико) или когда можно внести поправку на обнаруженное различие. К сожалению, в большинстве случаев внесение поправки, например, на тяжесть болезни или возраст, невозможно по причине малого числа пациентов. С другой стороны, внесение поправки на известный признак, по которому обнаружено различие, совсем не исключает наличия других, невидимых исследователю различий между группами. Например, можно внести поправку на длительность болезни до начала лечения, но одновременно группы могут различаться еще и по особенностям раковых клеток, неизвестному исследователю. Только рандомизация пациентов при включении их в проспективное исследование позволяет сделать сравниваемые группы сопоставимыми по всем, в том числе неизвестным признакам.

До той поры, пока исследователь не может создать для своего собственного исследования с одинаковые (в пределах случайных колебаний!) группы помощью рандомизации, и в тех случаях, когда проведение проспективного исследования невозможно, что нередко имеет место, например, у медицинских аспирантов, которые стеснены как во времени, так и в средствах, у исследователя остаются возможности наличными средствами сравнивать группы и изучать величину возможного смещения в результате неравенства групп.

На этапе анализа данных

Стандартизация – наиболее известный и достаточно эффективный способ внесения поправок на величину отдельного признака. Самый распространенный вид применения стандартизации – по возрасту. Можно, однако, стандартизовать, например, сравниваемые стационары по структуре коек и так далее[32]. Недостатком прямой и непрямой стандартизации является ограниченная возможность использования одновременно нескольких признаков. Например, если известно, что сравниваемые группы различаются одновременно по полу, возрасту и тяжести болезни, то весьма соблазнительно вычислительными средствами внести поправки на эти признаки и оценить, какова же разница в исходах при устранении влияния этих признаков. Этим целям служит ряд методов, основанных на регрессионном анализе.[33] Подчеркнём, что при внесении поправок на несколько признаков одновременно, в особенности при изучении небольших групп пациентов, легко возникают ситуации «перепоправки» и ложные результаты, не всегда очевидные. Кроме того, внесение поправок на известные различия между группами не исключает действия возможных неизвестных различий. Поэтому сравнение изучаемых групп по ряду доступных признаков – обязательная процедура для выявления возможных различий между группами, т.е. признаков СО отбора, но внесение  поправок на обнаруженные различия не исключает наличия других существенных различий.

Тем не менее, анализ серий случаев из практики имеет право на существование применительно к получению предварительных результатов, в особенности в тех областях, где проведение контролируемого эксперимента затруднено. Еще одним вариантом сравнения серий случаев или групп проспективного исследования, составленных без использования правильной рандомизации и ослепления является стратификационный анализ. Это – принципиально простая процедура, но очень полезная тем, что помогает исследователю лучше «увидеть и почувствовать» полученные данные. Она состоит в стратификации (разделении на страты – слои, группы) полученных данных. Например, в случае сравнения результатов лечения с использованием двух разновидностей оперативного вмешательства, длительное время сосуществующих в практике, такими стратами могут быть больны, оперированные в последние пять лет и по отдельности в предшествующие пятилетия. При таком сравнении может выясниться, например, что лучшие результаты у метода А обнаруживаются потому, что в течение 15 лет исходы при данном заболевании улучшаются (по каким-то причинам), и одновременно метод Б применяется реже; может быть видно, что для больных, оперированных в одно время, результаты двух методов лечения не различаются существенно.

5.      Заключение:

При обработке результатов физических измерений или химических анализов большое значение имеет анализ содержащихся в них различного рода ошибок. Для научно - исследовательских работ по экспериментальной петрологии характерен небольшой объем параллельных измерений, из - за чего затрудняется их статистическая обработка. Иногда она заменяется общим анализом всего хода эксперимента. Петролог - экспериментатор часто имеет дело с результатами комплексных измерений, каждое из которых имеет свои ошибки. Знание методов математической статистики поможет ему выявлять закономерности, зависимости, "отстраиваться от мешающих шумов". Эти методы позволяют грамотно оценивать результаты своей работы, определять "степень доверия" полученным данным. Авторы считают необходимым привести схему и примеры статистической обработки, наиболее полно отвечающей специфике экспериментальных работ по петрологии. Необходимые математические основы и приемы просты, не требуют от экспериментатора специальной подготовки. Для проведения анализа данных не нужно применения сложной вычислительной техники - достаточно калькулятора. Этот анализ не занимает много времени и его желательно проводить при обработке каждой серии экспериментальных данных.

Литература

References

1 A dictionary of epidemiology. 4 edn. IEA, Oxford University Press: Oxford, 2001:196.
2 Sackett DL, Oxman AD. HARLOT plc: an amalgamation of the world's two oldest professions. Brit Med J 2003;327(7429):1442-1445.
3 Kolstad HA, Olsen J. Why Do Short Term Workers Have High Mortality? Am J Epidemiol 1999;149(4):347-352. [http://aje.oxfordjournals.org/cgi/content/abstract/149/4/347]
4 Власов ВВ. Явления непреднамеренного отбора в клинических исследованиях. Клинич мед 1995;73(5):71-73.
5 Coughlin SS. Recall bias in epidemiologic studies. J Clin Epid 1990;43(1):87-91.
6 Hosek RS, Flanders WD, Sasco AJ. Bias in case-control studies of screening effectiveness. Am J Epidemiol 1996;143(2):193-201.
7 Grimes DA, Schulz KF. Bias and causal associations in observational research. L 2002;359:248-252.
8 Lachs MS, Nachamkin I, Edelstein PH et al. Spectrum bias in the evaluation of diagnostic tests: Lessons from the rapid dipstick test for urinary tract infection. Ann Intern Med 1992;117.- # 2:135-140.
9 Dickersin K, Min Y-I. Publication bias: The problem that won't go away. Ann N Y Acad Sci 1993;703:135-148.
10   Berlin JA, Begg CB, Louis TA. An assessment of publication bias using a sample of published clinical trials. J Amer Statist Assoc 1989;84:381-392.
11   Sterling TD. Publication decisions and their possible effects on inferences drawn from tests of significance - or vice versa. J Amer Statist Assoc 1959;54:30-34.
12   Cowley AJ, Skene A, Stainer K et al. The effect of lorcainide on arrhythmias and survival in patients with acute myocardial infarction: an example of publication bias. Int J Cardiol 1993;40(2):161-166.
13   Tramer MR, Reynolds DJM, Moore RA et al. Impact of covert duplicate publication on meta-analysis: A case study. Brit Med J 1997;315(7109).
14   Chapman S. Research from tobacco industry affiliated authors: need for particular vigilance. Tob Control 2005;14(4):217-219. [http://tc.bmjjournals.com]
15   Lopipero P, Bero LA. Tobacco interests or the public interest: 20 years of industry strategies to undermine airline smoking restrictions. Tob Control 2006;15(4):323-332.
16   Корнышева ЕА. Подлог. Междунар журн мед практики 2007;(2):9-14.
17   Власов ВВ. Дело Куржака. Междунар журн мед практики 2007;(2):15-16.