ВОЗМОЖНОСТЬ ДИАГНОСТИКИ ПОЛА ЧЕЛОВЕКА ПО ОДОНТОМЕТРИЧЕСКИМ ПРИЗНАКАМ С ПОМОЩЬЮ ROC-АНАЛИЗА

Возможность диагностики пола человека по одонтометрическим признакам с помощью ROC-анализа

Аннотация

Целью исследования было изучение возможности диагностики пола по размерам зубов новым способом. На краниологической коллекции изучалось 3 одонтометрических показателя 7 зубов верхней и 7 зубов нижней челюсти (симметричные зубы рассматривались единым массивом). Всего было исследовано 80 мужских зубов и 80 женских зубов. С помощью математического моделирования проанализировали данные полученные в ходе замеров зубов (стандартные одонтометрические процедуры, цифровой калипер «Mutitouyo» с точностью 10 микрон) и выявили 6 одонтометрических признаков взаимосвязанных с полом. Наиболее связанными с полом размерами оказались букко-лингвальный диаметр верхнего клыка, высоты коронок второго нижнего моляра, нижних резцов, нижнего клыка и верхнего медиального резца. С помощью ROC-анализа вычислены терминальные величины, разграничивающие половую принадлежность по одному из перечисленных одонтометрических размеров.

Разработка новых методов идентификации личности на основе изучения костных останков до сих пор не потеряла своей актуальности [1, 2]. Для Азербайджана разработка методик, адаптированных для диагностики населения страны имеет приоритетное значение. В формате этой канвы нами реализуется научный проект, ставящий целью разработку методик по стоматологической идентификации личности. Некоторые этапы этого проекта представлены в более ранних публикациях [3].

Материалы и методы исследования

Материалы и методы исследования. Материалом исследования была краниологическая коллекция азербайджанцев (с известными групповыми признаками – пол, возраст, рост и т.д.). Коллекция собиралась в различных районах Республики и в настоящее время хранится в краниологическом музее медико-криминалистического отдела Объединения «СМЕ и ПА» Минздрава Азербайджанской Республики. Указанная коллекция (включает 205 черепов; мужских – 135; женских – 70), достаточно адекватно отображающая краниологическую характеристику современного населения Азербайджана, введена в научную дискуссию с 1995-го года и неоднократно становилась материалом для различных исследований [4-7]. На черепах из этой коллекции изучались одонтометрические характеристики – высота коронки (ВКОР; у моляров измерялась от эмалево-цементной границы до уровня жевательной поверхности), вестибуло-лингвальный размер коронки (БУК; наибольшая толщина) и мезиально-дистальный размер коронки (МЕД; наибольшая ширина). Исследовались зубы, которые можно было свободно извлечь из их альвеол,поэтому в итоге удалось укомплектовать две выборки (мужскую и женскую) по 1120 зубов в каждой. Однако, полностью отвечающими условиям нашего опыта (при соответствующей рандомизации) в итоге оказались по 80 зубов из каждой выборки. При одонтометрии применялись стандартные процедуры, по общепринятым рекомендациям А.А. Зубова [8]. Размеры зубов снимали при помощи цифрового калипера «Mutitouyo» (точность 10 микрометров). Параметры зубов нижней и верхней челюсти рассматривались как раздельные массивы и тем самым, в целом были получены сводные
одонтометрические показатели 7 зубов верхней и 7 зубов нижней челюсти (параметры третьих моляров не изучались). Аббревиатура зубов: ВР1- верхний медиальный резец, ВР2-верхний латеральный резец, ВК-верхний клык, ВП1-верхний первый малый коренной зуб, ВП2-верхний второй малый коренной зуб, ВМ1-верхний первый большой коренной зуб, ВМ2-верхний второй большой коренной зуб. Первая буква «Н» в аббревиатуре указывает, соответственно, на аналогичные зубы на нижней челюсти. В предыдущих наших исследованиях сопоставление параметров одинаковых правосторонних и левосторонних зубов друг с другом явных различий между ними не выявило [3]. Поэтому в этом исследовании данные по симметричным зубам были представлены в объединённом массиве. В связи с этим номинальное количество зубов получивших аббревиатуру не 28, а 14 (7 зубов верхней и 7 зубов нижней челюсти). Таким образом, в общей сложности было исследовано по 1680 (3х7х80) одонтометрических признаков в каждой выборке.

При анализе результатов одонтометрии использовали методы вариационной статистики и ROC-анализ [9]. Создание цифровой базы данных, её обработку и процедуры математического моделирования осуществляли на компьютере с помощью пакета статистических программ MATLAB (версия 8.6, 2015 г.).

Результаты исследования и обсуждения

Результаты исследования и обсуждения. Общее количество параметров, как мы указывали, составило 3360. Также мы сказали, что данные по симметричным зубам представлены в объединённом массиве. Однако, отметим, что соотношение правосторонних и левосторонних зубов в нашей выборке было очень близко к 1. Фактический цифровой материал, собранный в одонтометрических бланках, после описанных выше процедур группировки, был введён в цифровую базу данных. Для каждого пола сводные одонтометрические показатели мы получили в отдельности. Затем были вычислены соответствующие статистические характеристики для мужской и женской выборок в отдельности.

Результаты соответствующего статистического анализа представлены ниже в таблицах №1 и №2.

Таблица 1

Статистические характеристики одонтометрических признаков в выборке мужских черепов

Одонтометрический признакNРазмах
Min.Max.
ХХ(r)σСvAs
As(r)EkEk(r)
БУК_ВР1802,48
5,708,18
7,030,080,740,54-0,10
0,27-1,190,53
МЕД_ВР1803,26
6,9410,20
8,450,110,990,980,25
0,27-1,210,53
ВКОР_ВР1801,51
8,8910,40
9,480,040,400,160,24
0,27-1,100,53
БУК_НР1802,25
4,807,05
6,150,060,560,31-0,17
0,27-1,060,53
МЕД_НР1802,60
4,597,19
5,740,080,750,560,14
0,27-1,240,53
ВКОР_НР1802,60
6,649,24
7,980,080,740,55-0,17
0,27-1,160,53
БУК_ВР2802,84
5,087,92
6,480,090,770,600,16
0,27-1,160,53
МЕД_ВР2803,14
5,228,36
6,850,100,890,790,01
0,27-1,200,53
ВКОР_ВР2802,44
7,7910,23
9,030,080,690,470,10
0,27-1,310,53
БУК_НР2802,91
4,817,72
6,310,090,820,670,04
0,27-1,150,53
МЕД_НР2802,95
4,377,32
5,970,090,810,66-0,05
0,27-1,130,53
ВКОР_НР2802,44
7,149,58
8,250,080,690,480,06
0,27-1,270,53
БУК_ВК802,67
4,387,05
5,480,080,690,470,30
0,27-1,090,53
МЕД_ВК802,22
6,598,81
7,810,070,590,350,01
0,27-0,970,53
ВКОР_ВК802,75
9,2512,00
10,870,080,730,53-0,09
0,27-1,240,53
БУК_НК802,54
6,098,63
7,290,080,730,530,06
0,27-1,170,53
МЕД_НК802,55
5,768,31
6,910,090,780,600,10
0,27-1,450,53
ВКОР_НК802,718,8811,5910,130,080,680,46-0,060,27-0,890,53
БУК_ВП1802,857,139,988,960,080,750,57-0,480,27-0,690,53
МЕД_ВП1803,446,099,537,040,080,700,490,920,271,040,53
ВКОР_ВП1802,757,039,788,350,090,850,720,040,27-1,310,53
БУК_НП1802,847,089,928,420,090,800,630,060,27-1,180,53
МЕД_НП1802,166,618,777,340,050,460,210,340,27-0,410,53
ВКОР_НП1802,016,978,988,030,060,580,330,000,27-1,210,53
БУК_ВП2803,037,3710,408,870,100,870,760,040,27-1,040,53
МЕД_ВП2802,415,658,066,950,070,660,43-0,020,27-1,190,53
ВКОР_ВП2802,346,288,627,470,080,720,520,000,27-1,330,53
БУК_НП2802,766,929,688,350,090,840,71-0,060,27-1,340,53
МЕД_НП2802,656,068,717,210,080,670,460,180,27-1,020,53
ВКОР_НП2802,686,298,977,650,090,790,630,080,27-1,120,53
БУК_ВМ1802,869,8112,6711,170,090,780,610,000,27-0,790,53
МЕД_ВМ1803,129,0112,1310,570,110,970,94-0,030,27-1,300,53
ВКОР_ВМ1802,405,487,886,380,070,600,360,160,27-1,100,53
БУК_НМ1803,168,6511,8110,460,100,940,88-0,150,27-1,250,53
МЕД_НМ1803,519,1512,6611,040,121,041,09-0,100,27-1,290,53
ВКОР_НМ1801,956,037,986,780,050,450,210,360,27-0,430,53
БУК_ВМ2802,989,8512,8311,390,100,930,86-0,020,27-1,310,53
МЕД_ВМ2803,217,9111,129,690,100,910,83-0,010,27-1,270,53
ВКОР_ВМ2802,635,097,726,020,060,570,320,300,27-0,350,53
БУК_НМ2802,938,5211,4510,180,090,850,71-0,080,27-1,130,53
МЕД_НМ2803,029,3912,4110,850,100,900,81-0,070,27-1,210,53
ВКОР_НМ2802,384,787,165,970,070,660,430,070,27-1,040,53

Таблица 2

Статистические характеристики одонтометрических признаков в выборке женских черепов

Одонтометрический признакNРазмахMin.Max.ХХ(r)σСvAsAs(r)EkEk(r)
БУК_ВР1802,565,407,966,850,080,730,53-0,060,27-1,280,53
МЕД_ВР1802,726,619,338,050,090,800,63-0,030,27-1,070,53
ВКОР_ВР1802,977,2310,208,680,100,870,750,110,27-1,220,53
БУК_НР1802,674,226,895,480,090,760,580,130,27-1,130,53
МЕД_НР1802,604,126,725,350,080,720,510,050,27-1,140,53
ВКОР_НР1802,286,038,317,050,070,660,440,180,27-1,060,53
БУК_ВР2802,894,537,425,910,100,940,880,020,27-1,550,53
МЕД_ВР2803,065,028,086,520,100,920,840,090,27-1,150,53
ВКОР_ВР2802,637,319,948,510,070,660,440,080,27-0,920,53
БУК_НР2803,024,487,505,720,090,780,610,230,27-0,620,53
МЕД_НР2802,964,687,645,850,080,740,550,300,27-0,750,53
ВКОР_НР2802,526,268,787,450,080,710,50-0,030,27-1,120,53
БУК_ВК803,196,149,337,840,100,920,85-0,110,27-1,190,53
МЕД_ВК803,166,029,187,620,110,980,97-0,030,27-1,390,53
ВКОР_ВК802,658,7511,4010,060,090,760,580,170,27-1,090,53
БУК_НК803,235,388,617,010,110,950,900,000,27-1,070,53
МЕД_НК802,835,218,046,650,090,800,650,000,27-1,100,53
ВКОР_НК802,598,2110,809,420,080,690,48-0,090,27-1,200,53
БУК_ВП1802,937,1410,078,620,100,920,850,180,27-1,360,53
МЕД_ВП1802,596,398,987,680,090,770,600,000,27-1,210,53
ВКОР_ВП1802,526,619,137,870,080,740,550,060,27-1,280,53
БУК_НП1802,766,158,917,470,090,830,69-0,090,27-1,170,53
МЕД_НП1802,805,698,496,920,080,700,490,040,27-0,790,53
ВКОР_НП1802,616,589,197,950,090,770,59-0,120,27-1,250,53
БУК_ВП2802,947,029,968,460,100,860,740,000,27-1,180,53
МЕД_ВП2802,645,237,876,560,090,780,600,010,27-1,020,53
ВКОР_ВП2802,615,958,567,060,080,670,450,070,27-1,100,53
БУК_НП2803,136,339,467,850,100,900,800,000,27-1,260,53
МЕД_НП2802,576,018,587,120,080,690,480,190,27-1,050,53
ВКОР_НП2802,716,118,827,410,080,740,550,060,27-0,830,53
БУК_ВМ1803,678,8812,5510,730,111,011,030,030,27-1,130,53
МЕД_ВМ1802,968,5711,5310,080,100,890,80-0,100,27-1,260,53
ВКОР_ВМ1802,404,617,015,870,070,670,450,000,27-1,030,53
БУК_НМ1802,968,5411,509,810,090,820,680,200,27-1,120,53
МЕД_НМ1803,189,0312,2110,680,100,910,830,040,27-1,050,53
ВКОР_НМ1802,265,197,456,290,070,630,40-0,030,27-1,300,53
БУК_ВМ2803,058,8511,9010,470,090,820,67-0,110,27-1,140,53
МЕД_ВМ2803,227,8311,059,470,100,940,88-0,030,27-1,210,53
ВКОР_ВМ2802,794,457,245,710,080,750,570,110,27-1,220,53
БУК_НМ2802,968,2711,239,770,090,830,69-0,110,27-1,110,53
МЕД_НМ2803,388,3411,7210,030,111,011,02-0,130,27-1,240,53
ВКОР_НМ2802,634,286,915,160,060,570,320,520,270,010,53

Разбор вариационно-статистических показателей исследованных одонтометрических параметров, которые представлены в таблицах не выявил каких-либо существенных особенностей или неожиданностей. Отметим, что полученные базы данных по одонтометрии мужских и женских совокупностей это пока первое масштабное освещение одонтометрических особенностей населения современного Азербайджана. Однако, картина распределения признаков имела некоторые особенности в показателях её асимметрии и эксцесса. Статистические параметры для первичной выборки показывали её сильную вариабельность (коэффициент вариации (Сv) только для одного параметра был равен 17%, а в остальных случаях >20%). Кроме того, коэффициент эксцесса для большинства одонтометрических признаков оказался отрицательным и почти всегда превосходил значение стандартной ошибки более чем в два раза.

Результаты биометрических тестов показывали, что для реализации математических моделей необходим переход на непараметрическую статистику. Были и другие ограничения. Так, мы располагали фактической электронной базой данных по размерам зубов современных азербайджанцев обо-его пола. Используя её можно было попытаться построить модели (уравнения) для прогноза пола с помощью канонического дискриминантного анализа. Однако, рассмотрение соответствующих корреляционных матриц и анализ предикторного потенциала наиболее подходящих одонтометрических признаков (эти результаты здесь не приводятся) в данной ситуации не выявлял обнадёживающих перспектив. Для нас при таком раскладе рациональным выходом представлялось использование другого статистического метода классификации – логистической регрессии. Задача логистической регрессии подразумевает разделение пространства исходных значений линейной границей на две области, в каждую из которых попадает один из классов (в нашем случае это мужской и женский пол).

Принимая во внимание описанные выше теоретические посылы, в представляемой исследовательской работе мы применили математические приёмы ROC-анализа. Полученные нами цифровые данные, относящиеся к одонтометрическим признакам, были проанализированы с помощью пакета прикладных программ MATLAB. Разбор результатов этого анализа позволил нам выделить шесть одонтометрических признаков, которые наиболее специфически были взаимосвязаны с полом. Этими признаками оказались: БУК_ВК, ВКОР_НМ2, ВКОР_НР2, ВКОР_НК, ВКОР_НР1, ВКОР_ВР1. Одонтометрические параметры представлены в порядке убывания их связи с полом. То есть в разряд наиболее «сцепленных» с полом размеров попали букко-лингвальный диаметр верхнего клыка и высота коронки второго нижнего моляра. Надлежащим образом, среди прочих признаков взаимосвязанных с полом, слабее всех связь с полом была у высоты коронки верхнего медиального резца.

При использованном способе ROC-анализа каждый одонтометрический параметр играет роль предсказывающей модели. Разумеется, в выборке встречаются такие зубы, размеры которых не соответствуют их полу. ROC-анализ в данном случае отсекает наиболее чувствительные в этом контек-стеодонтометрические параметры. Безусловно, множество других размеров зубов тоже обнаруживают какую-то связь с полом. Но использованный нами классификатор (в отличие от корреляции) учитывает также и специфичность характерности признака для прогнозируемого явления. То есть, если говорить проще, ROC-анализ позволяет также отсекать «доподлинность» признаков (одонтометрических размеров) в контексте взаимосвязи с полом. Получаемые в ходе анализа ROC-кривые учитывают и общую тенденцию в поведении признаков (как коэффициенты корреляции), и численность объектов в матрице (какое количество зубов с определённой величиной конкретного одонтометрическго показателя в выборке точно совпадают, например, с мужским полом) доподлинно отвечающих критериям конкретно осуществляемой сегрегации. Поэтому, по результатам нашего разбора удалось выделить всего шесть одонтометрических показателей, пригодных для надёжного предсказания пола по ним. Эти интерпретации и наши результаты очень наглядно демонстрирует график соответствующих ROC-кривых на рисунке 1.

Рисунок 1. Графическое представление классификатора прогностической эффективности некоторых размеров зубов на основе ROC-анализа
Рисунок 1. Графическое представление классификатора прогностической эффективности некоторых размеров зубов на основе ROC-анализа.

Примечание: sensitivity – чувствительность; specificity – специфичность; разными цветами обозна-чены результаты теста для различных одонтометрических признаков.

Заметим, что в нашем исследовании ROC-анализ проводился в виде теста на соответствие одонтометрического параметра мужской совокупности. Однако, это не имеет принципиального значения, так как обратный тест показал бы аналогичные результаты, с той лишь разницей, что мы бы имели одинаковые, но полярные ROC-кривые.

Прямая диагональ, которая делит наш график на две половины, называется линией неразличимости двух классов, позволяющей производить разделение (дискриминацию) точек (наши кривые — это совокупность точек) на различные классы. Эта линия неразличимости двух классов соответствует так называемому «бесполезному» классификатору. Чем ближе точки наших кривых к этой линии, тем ниже предикторный потенциал рассматриваемого признака. Таким образом, мы видим, что перечисленные выше шесть одонтометрических признаков демонстрируют достаточно надёжные прогностические возможности для предсказания пола. Точки на линии неразличимости двух классов полностью индифферентны к половой принадлежности зуба и тем самым являются как бы барьером разграничения в общем скалярном поле пола. Что же касается точек, из которых складываются ROC-кривые, то они, как показано выше, получаются при одновременном учёте чувствительности и специфичности «поведения» одонтометрического признака.

Из вышесказанного можно сделать вывод, что оптимальным будет считаться тот признак, который будет обладать такими характеристиками как 100% специфичность и 100% чувствительность. Однако, на практическом биометрическом материале добиться одновременного повышения и чувствительности, и специфичности, для какого-то предиктора невозможно. Проблема в данном случае решается с помощью нахождения компромиссной точки, или так называемого порога отсечения. Порог отсечения эта такая точка, в которой значения специфичности и чувствительности максимально эффективны при взаимном учёте. Грубо говоря, порог отсечения — это наибольший показатель суммы значений величины координат по обеим осям графика-классификатора. Координаты чувствительности и специфичности каждой точки какой-либо из наших ROC-кривых для указанных выше шести одонтометрических признаков приведены в таблице №3.

Таблица 3

Статистические показатели изученных краниометрических признаков

Одонтометрический признакЧувствительностьСпецифичностьПорог отсеченияВеличина признака, ммОДЦ*
знак
ностьниямм.
БУК_ВК0,9880,9751,866,3293,1%
ВКОР_НМ20,8380,6501,495,3273,8%
ВКОР_НР20,7130,6501,3637,7168,1%
ВКОР_НК0,6380,7371,3759,8668,8%
ВКОР_НР10,7000,7751,4757,6073,8%
ВКОР_ВР11,0000,5751,5758,8778,8%

Поясним полученные результате на конкретном примере. Максимальная сумма при ROC-анализе для ВКОР_НК равна 1,375. Эта сумма складывается из показателя чувствительности, равного 0,638 и степени специфичности, соответствующего значению 0,263. Для данного сочетания чувствительности и специфичности характерным является величина одонтометрического показателя равная 9,86 мм. То есть размер высоты коронки 9,86 мм, для нижнего клыка является порогом отсечения между размерами характерными для мужской совокупности и параметрами типичными для женской части нашей выборки. Показатели выше этого значения с большей вероятностью будут соответствовать параметрам мужских зубов, а значения ниже – размерам женских. При использовании этих данных на практике (речь об экстраполяции результатов на всю популяцию из которой взята изученная выборка), если мы причислим принадлежность нижнего клыка с высотой коронки, например, 9,9 к мужскому полу, то почти в 64% случаев мы поставим правильный диагноз. Однако, чуть более чем в 26% случаев мы доподлинно рискуем поставить неправильный диагноз (ошибка с диагностикой женского пола в каждом четвёртом случае). Как видим, вероятность ошибки достаточно высока, но она и не могла быть низкой при использовании для прогноза пола человека всего одной морфометрической характеристики его тела. Кроме того, как мы указали для данного случая, чем показатели ВКОР_НК будут выше значения 9,86 мм., тем с большей вероятностью зуб окажется мужским, а значения намного ниже этой величины будут характерными для женских зубов.

При анализе с помощью прикладного пакета MATLAB, программа, реализуя ROC-анализ, попутно рассчитывает общую диагностическую ценность (ОДЦ) анализируемой модели. Эта характеристика как бы отражает уровень качества модели и выражается в процентах. Чем он выше, тем более лучшей прогностической силой обладает модель. По данным из таблицы №3 видно, что наилучшим предиктором пола является вестибуло-лингвальный размер верхнего клыка. В очень приблизительном переложении на статистическую реальность цифры ОДЦ своего рода доверительные вероятности для каждого признака при решении вопроса о диагностике пола.

Так как работы в указанном направлении нами продолжаются, то мы пока не имели возможности широко обсудить и сопоставить полученные данные с результатами других учёных. Пока удалось сравнить наши результаты со схожими данными иранских исследователей [10]. Эти авторы также представили данные о прогностической ценности размеров верхних клыков и нижних моляров. Правда, эти результаты получены на ископаемом материале. Аналогичные сведения ещё имеются в работе российского автора [11]. Разумеется, в данном случае обе работы наиболее интересны, так как показывают данные по сопредельным этническим группам. Причём, касательно исследованного материала с территории Ирана, вообще, можно предположить, что речь идёт об одонтологических данных какой-либо субэтнической группы азербайджанцев. В дальнейшем мы планируем провести более подробный анализ в данном аспекте одонтологических исследований, с целью поиска более оптимальных решений диагностики пола по размерам зубов.

Список литературы

  1. Мусаев Ш.М. Основы судебной медицины. Руководство в 4-ёх томах, Баку, 2014, 2259 с.
  1. Попов В.Л., Мусаев Ш.М. Судебная меди-цина. Санкт-Петербург, 2009, 520 с.
  1. Mycaев Ш.М., Оруджов Н.Р. Диагностика гендерной принадлежности субъекта с помощью математического моделирования его одонтометри-ческих характеристик. Научные сообщения Поли-цейской академии, №2-4, 2017, с. 26-33.
  1. Мусаев Ш.М. Возможности краниометрических исследований при судебно-медицинской идентификации личности жителей Кавказа. Автореферат дисс. … докт. мед. наук. Москва, 1997, 40 с.
  1. Ибрагимов А.Ш. Изучение возможности прогнозирования длины тела человека по кранио-метрическим признакам и его судебно-медицин-ское значение. Диссертация … канд. мед. наук. Баку, 2004, 130 с.
  1. Sh.M. Musayev. Medico-criminalistic identifi-cation populations of Caucasus on skull. Baku, 1999, 127 p.
  1. Ибрагимов А.Ш. Параметры некоторых анатомических элементов нижней челюсти. Мор-фология, 2016, №3, с. 90-91.
  1. Зубов А.А. Одонтология. Методика антро-пологических исследований. Москва, 1968, 200 с.
  1. Гланц С. Медико-биологическая статистика. Перевод с англ. Москва, Практика, 1998, 459 с.
  1. Kazzazi S.M., Kranioti E.F. Sex estimation us-ing cervical dental measurements in an archaeological population from Iran. Archaeological and Anthropo-logical Sciences, Vol. 23, 2016, p. 219-240.
  2. Мальсагов О.М. Половой детерминизм и одонтометрический анализ зубов. Автореферат дисс… канд. мед. наук. Москва, 2005, 22 с.

Авторы:

Мусаев Ш.М.

Азербайджанский Государственный Институт усовершенствования врачей имени А. Алиева. Заведующий кафедрой «Судебная медицина и патологическая анатомия, с курсами основ права». Доктор медицинских наук, профессор.

Ибрагимов А.Ш.

Научно-практическое объединение «Судебно-медицинская экспертиза и патологическая анатомия» Минздрава Азербайджанской Республики. Эксперт-криминалист, кандидат медицинских наук.

Оруджов Н.Р.

Азербайджанский Государственный Институт усовершенствования врачей имени А. Алиева. Диссертант кафедры «Судебная медицина и патологическая анатомия, с курсами основ права». Магистр доктор

Уведомление о
0 Комментарий
Старые
Новые Популярные
Inline Feedbacks
Просмотр всех комментариев