Анализ данных

Клиническая и статистическая достоверность. Статис­тический анализ не может подтвердить или опровергнуть правоту экспериментальной гипотезы. Он только показывает вероятность того, что гипотеза верна. Если статистический анализ показывает, что вероятность того, что различия между группами были вызваны случайной вариацией, составляет менее 5% (р < 0,05), гипотеза счи­тается верной (или, согласно процедуре, отрицательная форма ги­потезы не верна).

Существует много возможных источников ошибки в статисти­ческом анализе. В клинических исследованиях наиболее вероятная ошибка возникает при применении статистики, основанной на нормальном распределении, к серии данных, которые не распреде­лены согласно этой колоколовидной кривой. Неправильно приме­ненная статистика дает неправильные значения вероятности, кото­рые могут привести к неправильной интерпретации данных. Други­ми словами, плохая статистика приводит к плохим выводам. Транс­формация данных до их статистического анализа (путем перевода каждой величины в логарифм) может сделать обычную статистику нормального распределения (параметрическую) более приемле­мой. Однако многие исследования требуют статистики, не осно­ванной на нормальном распределении (непараметрической).

Ортодонтия — это отличный пример клинической области, в которой теоретическая и практическая базы значительно измени­лись за последние 25 лет. Тот же прогресс наблюдался и в статисти­ке. Поэтому применение t-тестов для статистического анализа в клиническом исследовании равноценно использованию золотых коронок и дуг в лечении — не неправильно, но не самое лучшее, что можно сделать. Современный клиницист должен подозрительно относиться к результатам исследований, основанных на поверхно­стном статистическом анализе. К счастью, клинические журналы все чаще и чаще требуют от автора статьи адекватного статистичес­кого анализа. Однако к остальной неконтролируемой информации (например в Интернете) следует относиться с осторожностью.

Важно помнить, что статистическая и клиническая значи­мость — это не одно и то же. Тесты на статистическую достоверность отвечают на вопросы типа: «Вероятно ли, что различия между этими группами случайны?» Клиническая достоверность спрашивает: «Имеет ли это значение для результата лечения?» Иногда исследова­ния показывают статистически достоверные различия, которые не имеют никакой клинической значимости. Например, изучение раз­меров нижней челюсти после стимуляции роста и без лечения прак­тически никогда не показывает различий в конечном размере челю­сти (табл. 8-1). В некоторых публикациях различия статистически достоверны, в других — недостоверны. Вопрос в том, являются ли различия в I—2 мм при общем размере челюсти 12 см клинически значимыми (т.е. связаны ли они с лечением), а также что было бы, если бы они были таковыми. Ответ на вопрос «Можно ли стимули­ровать рост нижней челюсти?» должен быть основан на величине изменений, а также на данных статистического анализа. И ответ, скорее всего, будет следующим: «Если можно, то не намного».

Таблица 8-1

Клиническое исследование Университета Северной Каролины, класс II: изменения входе I фазы (15 мес.)

	Контроль	Функциональ­ный аппарат	Внеротовая тяга
Сагиттальная щель, мм	-0,1	-2,6	-1,5
Стандартное отклонение	1,0	1,9	1,4
Разброс	-2,6 1,9	-7,9 0,2	-5,1 1,1
Резцовое перекрытие, мм	0,4	-1,4	0,0
Стандартное отклонение	1,1	2,1	1,1
Разброс	-2,4 3,8	-7,0 2,3	-2,3 3,6

Могут ли клинически значимые различия быть незамеченными при статистическом анализе? Конечно да, особенно если выборка небольшая и/или плохо подобранная. Однако если статистический анализ не подтверждает того, что заметил клиницист, скорее всего клиницист не прав. Человеку свойственно помнить необычное, а не обычное. Публикации о результатах лечения обычно фокуси­руются на очень хороших или очень плохих результатах, что застав­ляет врачей думать, что эти крайние формы встречаются чаще, чем на самом деле. Статистически достоверные данные, не имеющие клинической значимости, чаще встречаются в литературе, чем кли­нически значимые данные без статистической достоверности.

Вариабельность результатов и презентация данных. Как описать то, что произошло с группой? Обычно это делается при помощи среднего значения (или медианы) и разброса в груп­пе или стандартного отклонения. Обычно это выглядит так: «В среднем группа А показала статистически достоверные/недо­стоверные различия с группой В».

Проблема описания данных такого типа может быть проиллюс­трирована сравнением таблицы 8-1 и рисунка 8-2, которые пред­ставляют одни и те же данные, но производят (по крайней мере, для многих врачей) разное впечатление того, что происходит. Дан­ные взяты из случайного клинического исследования по изучению раннего лечения аномалий окклюзии класса II, в котором были ис­ключены дети с длинным и коротким типами лица (это важное ис­следование рассмотрено в главе 15). Многие врачи, анализируя таб­лицу, сделают вывод, что, как и ожидалось, с контрольной группой нелеченых детей ничего не произошло. Таблица показывает, что у пациентов, использовавших внеротовую тягу, наблюдалось неко­торое уменьшение сагиттальной щели, но резцовое перекрытие не изменялось, в то время как при использовании функционального аппарата сагиттальная щель уменьшилась почти вдвое, а также про­изошло уменьшение резцового перекрытия.

Таблица 8-2

Случайное клиническое исследование, класс Il Скелетные эффекты: угол ANB (стандартное отклонение)

Посещение	Контроль	Бионатор	Внеротовая тяга
Первое	6,29(1,98)	6,26(2,06)	6,04(1,82)
Конец 1 -го этапа	6,11 (1,90)	5,14(1,99)	4,72(1,82)
Этап 1-го изменения	-0,17	-1,12	-1,31
Конец 2-го этапа	4,28(2,04)	3,93(1,94)	4,10(1,97)
Этап 2-го изменения	-1,83	-1,21	-0,62
Общие изменения	-2,00	-2,33	-1,93

Рис. 8-2. Этот график отражает данные клинического исследования Уни­верситета Северной Каролины, класс II. Средние значения для каждой группы представлены по линии, делящей каждый квадрат пополам. Разме­ры квадратов отражают 25-й и 75-й перцентиль группы, а линия показыва­ет разброс. Этот график позволяет легче визуализировать вариабельность данных в группах, чем таблица (см. табл. 8-1). Обратите внимание, что хотя согласно среднему значению изменения в контрольной группе были близ­ки к нулю, у некоторых детей наблюдалось увеличение сагиттальной щели, а у других - увеличение. Хотя уменьшение сагиттальной щели в обеих груп­пах леченых было статистически достоверно по сравнению с контрольной группой, не все дети благоприятно реагировали на лечение.

 

Рисунок 8-2 подтверждает, что средние данные таблицы верны, однако он также четко показывает вариабельность в группах. Хотя стандартное отклонение и разброс также были представлены в таб­лице, они не так наглядны, как на рисунке. На рисунке видно, что в контрольной группе у многих детей наблюдалось уменьшение са­гиттальной щели, но у многих наблюдалось и ее увеличение, поэто­му среднее значение было близко к нулю. У некоторых пациентов, использовавших внеротовую тягу, наблюдалось значительное улуч­шение, в то время как другие не реагировали на лечение, а у неко­торых ситуация даже ухудшилась. Также наблюдалась большая ва­риабельность в группе использовавших функциональные аппара­ты. Очень важно при оценке таких данных принимать во внимание не только средние значения, но и вариации, и особенно важно не считать, что среднее значение — это то, что Вы получите у каждого пациента. График, представленный на рисунке 8-2, помогает врачу видеть не только средние значения, но и вариации.

Распознавание синдрома: чувствительность и специ­фичность диагностических данных. По определению синдром - это набор параметров, который формирует определенный стереотип. Многие синдромы аномалий развития были уже распо­знаны и продолжают выявляться в настоящее время. Выявление синдрома очень важно в клинических исследованиях, поскольку па­циенты, которые могут быть сгруппированы по определенному сте­реотипу, более предсказуемы, чем те, которых не удается классифи­цировать на таком уровне. Например, Вы получите более точный ответ на вопрос «Как пациенты с синдромом Crouzon реагируют на использование внеротовой тяги?», чем на вопрос «Как пациенты с недоразвитием верхней челюсти реагируют на использование вне­ротовой тяги?», просто потому, что существует много видов недораз­вития верхней челюсти, а синдром Crouzon только один.

Клинический прогресс требует признания типов аномалий, не­зависимо от того, называют их синдромами или нет. Мы уже отме­чали важность использования в ортодонтической диагностике бо­лее расширенную, чем классификации Angle, классификацию. Од­ним из преимуществ классификации Ackerman—Proffit является то, что она разделяет пациентов на более гомогенные группы, которые более предсказуемы.

С этой точки зрения важно учитывать два дополнительных на­учных термина, чувствительность и специфичность, которые отно­сятся к диагностическим критериям и критериям оценки реакции на лечение. Чувствительность показывает способность данного критерия (например, угла ANB) дифференцировать степень выра­женности или степень изменений (угол ANB: диагностически — степень выраженности соотношения челюстей по II классу, реак­ция на лечение — степень улучшения или ухудшения соотношения челюстей по II классу). Специфичность обозначает степень, до ко­торой критерий отражает то, что он должен отражать независимо от других параметров (в случае с углом ANB — насколько хорошо он показывает сагиттальные взаимоотношения челюстей, не завися от вертикального положения челюстей, протрузии или ретрузии рез­цов и других факторов). Очень чувствительный параметр всегда по­ложителен при наличии условия. Специфичность иногда особенно отражает, насколько хорошо критерий может отделить норму от аномалии (для угла ANB это способность отличить скелетный класс II от нормального соотношения челюстей). Очень специфич­ный параметр всегда отрицателен при отсутствии условия.

Почему эти определения так важны? Мы знаем, что угол ANB чувствителен для определения изменений в сагиттальном соотно­шении челюстей (т.е. даже небольшие изменения в сагиттальном положении одной или другой челюсти вызовут измеримые изменения угла). Его специфичность не так высока, поскольку угол изме­няется при изменении высоты лица, даже если при этом положение челюстей по сагиттали остается прежним. Он также изменяется при перемещении резцов орально или вестибулярно как следствие ко­стного ремоделирования и изменения положение точек А и В. Мо­жете ли Вы принимать изменения угла ANB как показатель скелет­ных изменений у пациентов с аномалией окклюзии класса II, про­ходящих альтернативные виды лечения? Только если Вы уверены, что не было больших изменений в высоте лица и положении кор­ней резцов. Понятно, что такие рассуждения должны проводиться применительно к любому параметру в любом клиническом иссле­довании. Чем выше чувствительность и специфичность используе­мых параметров, тем легче интерпретировать результаты, и наобо­рот. Однако ни один из критериев не может быть достаточно чув­ствительным и специфичным, чтобы показать все, что вы хотите.

Компьютерные записи и возможность мета-анализа. Клинические данные в форме записей о результатах лечения име­ются не только в университетах и других подобных учреждениях, но и в каждой частной клинике. Трудностью клинических исследо­ваний всегда является сбор достаточного объема информации о до­статочном количестве пациентов. Распространенность использова­ния компьютера для хранения информации, а также все растущая тенденция заносить в компьютер диагностические данные каждого пациента и результаты его лечения позволяют расширить горизон­ты клинических исследований до еще недавно не вообразимой сте­пени.

Большинство исследователей сталкивались с двумя основными проблемами в ходе сбора необходимой информации:

1) переносить в электронный вид информацию с рукописных анкет и форм, вруч­ную анализировать рентгенограммы и гипсовые модели челюстей было очень сложно и занимало много времени;

2) у большинства врачей не было четкого руководства, как это делать.

Компьютеризация имеет потенциал к решению этих проблем. Если вся информация заносится не в бумажные анкеты, а в ком­пьютер, стандартным образом (что обеспечивается программным обеспечением компьютера), если рентгенограммы и гипсовые мо­дели сканируются и анализируются компьютером (что все чаще и чаще применяется в каждой клинике), информация становится легкодоступной и ее не нужно больше выискивать в картах и анке­тах. Одной из основных проблем при наборе пациентов является его селективная природа. Нередко основной причиной, почему не­которые пациенты не включаются в исследование, является то, что включить всех пациентов, которые прошли то или иное лечение, очень трудоемко. С использованием компьютерного ввода данных эта проблема исчезает. Кроме того, стандартным протоколом сбора информации также можно сделать компьютер, на который инфор­мация будет присылаться из частных клиник. Передавать и обнов­лять данные также можно через Интернет, что уже используется в некоторых исследованиях в медицине. Такой оперативный сбор информации со многих частных клиник позволит собрать доста­точный объем информации, необходимый для ответа на многие важные клинические вопросы. Доступность информации при этом стимулирует начало новых и новых исследований.

Еще одним способом оценки эффективности лечения являет­ся объединение результатов нескольких исследований, посвящен­ных одному и тому же феномену. Это относится к современному методу мета-анализа, который позволяет проводить статистичес­кую обработку большого количества различных исследований¹. В ортодонтии по одной и той же проблеме проводится большое количество маленьких разрозненных исследований, нередко с со­вершенно разными протоколами, что делает их сравнение чрезвы­чайно сложным. Мета-анализ не заменяет необходимости стан­дартизации протоколов дальнейших исследований, но позволяет уменьшить неопределенность по многим важным клиническим вопросам.

Эра ортодонтии, основанной на мнениях и суждениях, прошла. В будущем она будет опираться на данные проведенных исследова­ний. В настоящее время клинические решения должны принимать­ся на основании доступной информации. Однако когда по чьему-то настоянию появляется новый метод лечения и серия сообщений подтверждает его эффективность, важно помнить, что «работам, выполненным с большим энтузиазмом, недостает контроля, а хорошо контролируемым работам недостает энтузиазма».

Уменьшение неопределенности в планировании лечения

Даже при наличии данных клинических исследований очень слож­но предсказать, как тот или иной пациент будет реагировать на пла­нируемое лечение. Реакция на лечение очень вариабельна. В ортодонтии такая вариабельность определяется в основном двумя фак­торами: типом роста и эффектом лечения на проявление роста. В настоящее время реакция на лечение у нерастуших пациентов вполне предсказуема, рост — нет.