<?xml version="1.0" encoding="UTF-8"?>
<!DOCTYPE article PUBLIC "-//NLM//DTD JATS (Z39.96) Journal Publishing DTD v1.3 20210610//EN" "JATS-journalpublishing1-3.dtd">
<article article-type="research-article" dtd-version="1.3" xmlns:mml="http://www.w3.org/1998/Math/MathML" xmlns:xlink="http://www.w3.org/1999/xlink" xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance" xml:lang="ru"><front><journal-meta><journal-id journal-id-type="publisher-id">myrwd</journal-id><journal-title-group><journal-title xml:lang="ru">Реальная клиническая практика: данные и доказательства</journal-title><trans-title-group xml:lang="en"><trans-title>Real-World Data &amp; Evidence</trans-title></trans-title-group></journal-title-group><issn pub-type="epub">2782-3784</issn><publisher><publisher-name>Publishing House OKI</publisher-name></publisher></journal-meta><article-meta><article-id pub-id-type="doi">10.37489/2782-3784-myrwd-080</article-id><article-id custom-type="edn" pub-id-type="custom">UNSHEV</article-id><article-id custom-type="elpub" pub-id-type="custom">myrwd-111</article-id><article-categories><subj-group subj-group-type="heading"><subject>Research Article</subject></subj-group><subj-group subj-group-type="section-heading" xml:lang="ru"><subject>БЕЗОПАСНОСТЬ ЛЕКАРСТВ</subject></subj-group><subj-group subj-group-type="section-heading" xml:lang="en"><subject>DRUG SAFETY</subject></subj-group></article-categories><title-group><article-title>Перспективы применения индивидуализированного интегрального анализа нежелательных явлений при клинических исследованиях вакцин</article-title><trans-title-group xml:lang="en"><trans-title>Prospects for the application of individualized integrated analysis of adverse events in vaccine clinical trials</trans-title></trans-title-group></title-group><contrib-group><contrib contrib-type="author" corresp="yes"><contrib-id contrib-id-type="orcid">https://orcid.org/0000-0003-4029-3170</contrib-id><name-alternatives><name name-style="eastern" xml:lang="ru"><surname>Верведа</surname><given-names>А. Б.</given-names></name><name name-style="western" xml:lang="en"><surname>Verveda</surname><given-names>A. B.</given-names></name></name-alternatives><bio xml:lang="ru"><p>Верведа Алексей Борисович — с. н. с.; к. м. н., в. н. с.</p><p>Санкт-Петербург</p></bio><bio xml:lang="en"><p>Aleksey B. Verveda — Senior Researcher of Scientific Work; PhD, Cand. Sci. (Med.), Leading Researcher</p><p>St. Petersburg</p></bio><email xlink:type="simple">aleksivan02@rambler.ru</email><xref ref-type="aff" rid="aff-1"/></contrib><contrib contrib-type="author" corresp="yes"><contrib-id contrib-id-type="orcid">https://orcid.org/0000-0001-6635-9786</contrib-id><name-alternatives><name name-style="eastern" xml:lang="ru"><surname>Сыраева</surname><given-names>Г. И.</given-names></name><name name-style="western" xml:lang="en"><surname>Syraeva</surname><given-names>G. I.</given-names></name></name-alternatives><bio xml:lang="ru"><p>Сыраева Гульнара Ислямовна — зам. управляющего по качеству; к. м. н. ассистент кафедры клинической фармакологии и доказательной медицины</p><p>Санкт-Петербург</p></bio><bio xml:lang="en"><p>Gulnara I. Syraeva — Deputy Quality ManagerPhD; Cand. Sci. (Med.), Department of Clinical Pharmacology and Evidence-based Medicine</p><p>St. Petersburg</p></bio><email xlink:type="simple">syraevagulnara@gmail.com</email><xref ref-type="aff" rid="aff-2"/></contrib><contrib contrib-type="author" corresp="yes"><contrib-id contrib-id-type="orcid">https://orcid.org/0000-0003-2503-4402</contrib-id><name-alternatives><name name-style="eastern" xml:lang="ru"><surname>Василюк</surname><given-names>В. Б.</given-names></name><name name-style="western" xml:lang="en"><surname>Vasilyuk</surname><given-names>V. B.</given-names></name></name-alternatives><bio xml:lang="ru"><p>Василюк Василий Богданович — управляющий; д. м. н., профессор кафедры токсикологии, экстремальной и водолазной медицины</p><p>Санкт-Петербург</p></bio><bio xml:lang="en"><p>Vasiliy B. Vasilyuk — Managing; Dr. Sci. (Med.), professor of the Department of Toxicology, Extreme and Diving Medicine</p><p>St. Petersburg</p></bio><email xlink:type="simple">vasilyuk_vb@ecosafety.ru</email><xref ref-type="aff" rid="aff-3"/></contrib><contrib contrib-type="author" corresp="yes"><contrib-id contrib-id-type="orcid">https://orcid.org/0000-0003-4212-5453</contrib-id><name-alternatives><name name-style="eastern" xml:lang="ru"><surname>Фарапонова</surname><given-names>М. В.</given-names></name><name name-style="western" xml:lang="en"><surname>Faraponova</surname><given-names>M. V.</given-names></name></name-alternatives><bio xml:lang="ru"><p>Фарапонова Мария Валерьевна — зам. управляющего по научной работе</p><p>Санкт-Петербург</p></bio><bio xml:lang="en"><p>Maria V. Faraponova — Deputy Manager for Scientific Work</p><p>St. Petersburg</p></bio><email xlink:type="simple">faraponova_mv@ecosafety.ru</email><xref ref-type="aff" rid="aff-4"/></contrib></contrib-group><aff-alternatives id="aff-1"><aff xml:lang="ru"><institution>ООО «Научно-исследовательский центр Эко-безопасность»; ФГБУН «Научно-исследовательский институт промышленной и морской медицины» ФМБА</institution><country>Россия</country></aff><aff xml:lang="en"><institution>Eco-Safety Research Center LLC; Research Institute of Industrial and Maritime Medicine of Federal Medical Biological Agency</institution><country>Russian Federation</country></aff></aff-alternatives><aff-alternatives id="aff-2"><aff xml:lang="ru"><institution>ООО «Научно-исследовательский центр Эко-безопасность»; ФГБУ ВО «Первый Санкт-Петербургский государственный медицинский университет имени академика И. П. Павлова»</institution><country>Россия</country></aff><aff xml:lang="en"><institution>Eco-Safety Research Center LLC; First St. Petersburg State Medical University named after Academician I. P. Pavlov</institution><country>Russian Federation</country></aff></aff-alternatives><aff-alternatives id="aff-3"><aff xml:lang="ru"><institution>ООО «Научно-исследовательский центр Эко-безопасность»; ФГБУ ВО «Северо-Западный государственный медицинский университет им. И. И. Мечникова»</institution><country>Россия</country></aff><aff xml:lang="en"><institution>Eco-Safety Research Center LLC; North-Western State Medical University named after I. I. Mechnikov</institution><country>Russian Federation</country></aff></aff-alternatives><aff-alternatives id="aff-4"><aff xml:lang="ru"><institution>ООО «Научно-исследовательский центр Эко-безопасность»</institution><country>Россия</country></aff><aff xml:lang="en"><institution>Eco-Safety Research Center LLC</institution><country>Russian Federation</country></aff></aff-alternatives><pub-date pub-type="collection"><year>2025</year></pub-date><pub-date pub-type="epub"><day>30</day><month>10</month><year>2025</year></pub-date><volume>5</volume><issue>3</issue><fpage>21</fpage><lpage>37</lpage><permissions><copyright-statement>Copyright &amp;#x00A9; Верведа А.Б., Сыраева Г.И., Василюк В.Б., Фарапонова М.В., 2025</copyright-statement><copyright-year>2025</copyright-year><copyright-holder xml:lang="ru">Верведа А.Б., Сыраева Г.И., Василюк В.Б., Фарапонова М.В.</copyright-holder><copyright-holder xml:lang="en">Verveda A.B., Syraeva G.I., Vasilyuk V.B., Faraponova M.V.</copyright-holder><license license-type="creative-commons-attribution" xlink:href="https://creativecommons.org/licenses/by/4.0/" xlink:type="simple"><license-p>This work is licensed under a Creative Commons Attribution 4.0 License.</license-p></license></permissions><self-uri xlink:href="https://www.myrwd.ru/jour/article/view/111">https://www.myrwd.ru/jour/article/view/111</self-uri><abstract><sec><title>Введение</title><p>Введение. Данная работа является продолжением изучения безопасности лекарственной терапии в клинических исследованиях, в рамках которого был предложен алгоритм принятия решений на основе метода количественного интегрального анализа нежелательных явлений (НЯ). Для внедрения разработанного алгоритма в клиническую практику необходима его апробация на различных группах лекарственных средств. В качестве препарата для тестирования выбраны вакцины для активной профилактики вирусного гепатита А. Полученные результаты могут стать основой для оценки возможностей метода при формировании прогноза развития неблагоприятных реакций в процессе вакцинопрофилактики.</p></sec><sec><title>Цель</title><p>Цель. Определение эффективности и перспективных направлений применения индивидуализированного интегрального анализа нежелательных явлений по результатам клинических испытаний на примере вакцин для активной профилактики вирусного гепатита А.</p></sec><sec><title>Материалы и методы</title><p>Материалы и методы. Индивидуализированная интегральная оценка НЯ выполнена с использованием алгоритма, основные этапы которого подробно представлены в предыдущих работах авторов, по результатам клинических исследований безопасности и иммуногенности вакцины против вирусного гепатита А, проведённых в соответствии с регуляторными и этическими требованиями Российской Федерации. На этапе определения весовых коэффициентов был осуществлён экспертный опрос для оценки важности отдельных характеристик НЯ с использованием метода анализа иерархий. Математико-статистический анализ индивидуализированных интегральных оценок проводили с использованием валидированного программного обеспечения. Для решения задачи оценки информативности и дискриминационной значимости гендерно-возрастных и клинико-лабораторных показателей с целью последующего прогноза возможного развития неблагоприятных отклонений в состоянии здоровья использовали модуль GDA — Общие модели дискриминантного анализа.</p></sec><sec><title>Результаты</title><p>Результаты. В процессе реализации основных этапов количественного интегрального анализа НЯ по результатам клинического исследования вакцин для профилактики вирусного гепатита А на системно-органном и организменном уровнях получены данные, свидетельствующие об отсутствии необходимости дополнительной экспертной оценки или повторного проведения исследования этого препарата. Установленная в настоящей работе частота встречаемости нежелательных реакций по отдельным органам и системам была выше уровня для аналогичных вакцин, приведённых в протоколе исследования. С использованием дискриминантного анализа проведена оценка информативности от- дельных гендерно-возрастных и клинико-лабораторных показателей, полученных во время скрининга добровольцев, для разделения групп лиц с повышенной и умеренной индивидуальной чувствительностью к введению вакцин для профилактики вирусного гепатита А. Установлено, что только 8 из 37 показателей вносили статистически значимый вклад в разделение анализируемых групп. Изучаемые показатели имели низкую информативность, что свидетельствует о недостаточной специфичности признаков среди данных скринингового обследования для прогноза развития неблагоприятных отклонений в состоянии здоровья. Общий уровень дискриминации анализируемых групп на основе данных скринингового обследования добровольцев составил около 79 %. Доля правильной классификации группы лиц с повышенной индивидуальной чувствительностью к введению препарата составила 63 %.</p></sec><sec><title>Выводы</title><p>Выводы. Разработанный и апробированный на примере вакцин для профилактики вирусного гепатита А метод количественного интегрального анализа НЯ показал перспективность его применения для выделения лиц с повышенной индивидуальной чувствительностью в ходе вакцинопрофилактики на основе исходных гендерно-возрастных, демографических и клинико-лабораторных показателей. Дальнейшие исследования планируется проводить на объединенных данных о нежелательных реакциях при применении вакцин со сходными органоспецифическими и системными нарушениями как в ходе клинических исследований, так и по данным автоматизированной информационной системы «Фармаконадзор», а также путём расширения методов математико-статистической обработки данных, включая нейросетевой анализ.</p></sec></abstract><trans-abstract xml:lang="en"><sec><title>Introduction</title><p>Introduction. This work is a continuation of the study of the safety of drug therapy in clinical trials, within the framework of which a decision-making algorithm based on the quantitative integral analysis of adverse events (AE) was proposed. It is necessary to test the developed algorithm in clinical practice on various groups of drugs. Vaccines for the active prevention of viral hepatitis A were selected for testing. The results obtained can form the basis for assessing the capability of the method in forming a forecast for the development of adverse reactions during vaccination.</p></sec><sec><title>Objective</title><p>Objective. Determination of the effectiveness and promising areas of application of individualized integral analysis of adverse events based on the results of clinical trials using vaccines for the active prevention of viral hepatitis A as an example.</p></sec><sec><title>Materials and methods</title><p>Materials and methods. Individualized integral assessment of AE was performed using an algorithm, the main stages of which are presented in detail in the previous works of the authors, based on the results of clinical studies of the vaccine’s safety and immunogenicity against viral hepatitis A, conducted in accordance with the regulatory and ethical requirements of the Russian Federation. At the stage of determining the weighting factors, an expert survey was conducted using the hierarchy analysis method to assess the importance of individual characteristics of adverse events. Mathematical and statistical analyses of individualized integral assessments were performed using validated software. To solve the problem of assessing the information content and discriminatory significance of gender-age and clinical-laboratory indicators for the purpose of subsequent prediction of the possible development of adverse health deviations, the GDA module — General Discriminant Analysis Models — was used.</p></sec><sec><title>Results</title><p>Results. In the process of implementing the main stages of the quantitative integral analysis of AE based on the results of a clinical study of vaccines for the prevention of viral hepatitis A at the system-organ and organism levels, data were obtained indicating that there is no need for additional expert assessment or repeated study of this drug. The frequency of adverse reactions for individual organs and systems established in this study was higher than the level for similar vaccines listed in the study protocol. Using discriminant analysis, the information content of individual gender-age and clinical-laboratory indicators obtained during the screening of volunteers was assessed to separate groups of individuals with increased and moderate sensitivity to the introduction of vaccines for the prevention of viral hepatitis A. Only 8 of 37 indicators made a statistically significant contribution to the separation of the analyzed groups. The indicators being studied had low infor- mation content, which indicates insufficient specificity of the features among the screening examination data for predicting the development of adverse health conditions. The overall level of discrimination of the analyzed groups based on the screening examination data of volunteers was approximately 79 %. The proportion of correct classification of the group of individuals with increased sensitivity to drug introduction was 63 %.</p></sec><sec><title>Conclusions</title><p>Conclusions. The method of quantitative integral analysis of adverse events developed and tested on the example of vaccines for the prevention of viral hepatitis A has shown the potential for its use in identifying individuals with increased individual sensitivity during vaccination based on initial gender-age, demographic, and clinical-laboratory parameters. Further studies are planned to be conducted on pooled data on adverse reactions during the use of vaccines with similar organ-specific and systemic disorders during clinical trials and according to the automated information system "Pharmacovigilance", as well as by expanding the methods of mathematical and statistical data processing, including neural network analysis.</p></sec></trans-abstract><kwd-group xml:lang="ru"><kwd>нежелательные явления</kwd><kwd>количественный интегральный анализ</kwd><kwd>индивидуализация</kwd><kwd>клинические исследования</kwd><kwd>статистический анализ</kwd><kwd>безопасность лекарственных средств</kwd></kwd-group><kwd-group xml:lang="en"><kwd>adverse events</kwd><kwd>quantitative integral analysis</kwd><kwd>individualization</kwd><kwd>clinical trials</kwd><kwd>statistical analysis</kwd><kwd>drug safety</kwd></kwd-group></article-meta></front><body><sec><title>Введение / Introduction</title><p>Ранее нами была разработана методика углублённого изучения безопасности фармакотерапии на основе количественного интегрального анализа нежелательных явлений (НЯ), которая представляет собой пятиэтапную индивидуализированную оценку выявленных нежелательных реакций в клинических исследованиях [<xref ref-type="bibr" rid="cit1">1</xref>]. Апробация разработанного подхода на основе результатов клинических исследований препарата с международным непатентованным наименованием (МНН) трастузумаб позволила подтвердить его эффективность, а также сделать заключение о возможности прогнозирования безопасность назначаемой фармакотерапии, и, в перспективе, перейти к риск-ориентированному подходу при применении данного лекарственного средства на пострегистрационном этапе [<xref ref-type="bibr" rid="cit2">2</xref>].</p><p>Продолжение использования разработанного методического подхода при анализе результатов клинических исследований вакцин обусловлено следующим обстоятельством. Проведённая нами апробация представленного алгоритма в ходе клинических исследований I фазы на примере МНН трастузумаб связана с ключевой особенностью данного этапа — привлечение, как правило, здоровых добровольцев. Использование результатов обследования данного контингента лиц позволяет с высокой долей уверенности утверждать, что выявленные в ходе исследования НЯ связаны преимущественно с анализируемым лекарственным средством, а не с множеством других факторов, которые необходимо учитывать при изучении препарата на пациентах в более поздних фазах (степень тяжести, сопутствующие болезни и ряд других факторов). Однако однократный приём препарата по умолчанию приводит к развитию гораздо меньшего количества НЯ, чем курсовое применение в ходе клинических исследований II–IV фаз на пациентах, что потребует модификации разработанного метода для учёта влияния множества стратифицирующих факторов.</p><p>В то же время в ходе клинических исследований вакцин, включая III фазу, дозовые нагрузки в большинстве случаев сопоставимы с аналогичными дозами при вакцинации населения и проводятся на здоровых добровольцах, что позволяет использовать разработанный метод без дополнительной модификации для оценки его возможностей при формировании прогноза развития неблагоприятных реакций в процессе вакцинопрофилактики.</p></sec><sec><title>Цель работы / Objective</title><p>Определение эффективности и перспективных направлений применения индивидуализированного интегрального анализа НЯ по результатам клинических испытаний на примере вакцин для активной профилактики вирусного гепатита А.</p></sec><sec><title>Материалы и методы / Materials and methods</title><p>В настоящем исследовании проведена индивидуализированная интегральная оценка НЯ, основные этапы которой подробно представлены в наших предыдущих работах [<xref ref-type="bibr" rid="cit1">1</xref>][<xref ref-type="bibr" rid="cit2">2</xref>], по результатам клинических исследований безопасности и иммуногенности вакцины против вирусного гепатита А, проведённых в соответствии с регуляторными и этическими требованиями Российской Федерации.</p><p>На этапе определения весовых коэффициентов был осуществлён экспертный опрос для оценки важности отдельных характеристик нежелательных явлений с использованием метода анализа иерархий (МАИ) [<xref ref-type="bibr" rid="cit3">3</xref>]. Методология МАИ была реализована экспертами — членами Независимого Комитета по мониторингу данных (НКМД / Independent Data Monitoring Committee), организованного на базе ООО «Научно-исследовательский центр Эко-безопасность».</p><p>Математико-статистический анализ результатов осуществляли с использованием пакетов R 4.4.0 и Statistica 10.0, а также Microsoft Excel 2013 для построения таблиц.</p><p>Рассчитывали следующие описательные статистики интегральных групповых показателей НЯ — среднее арифметическое (M), стандартное отклонение (SD), медиана (Me), верхняя (UQ) и нижняя (LQ) квартили. Также приводили численность группы (N), минимальные (Min) и максимальные (Max) значения показателя. Частоты встречаемости в тексте представлены в виде абсолютной частоты (n), относительной частоты (%), а также приведена численность группы (N).</p><p>Для решения задачи оценки информативности гендерно-возрастных и клинико-лабораторных показателей с целью последующего прогноза возможного развития неблагоприятных отклонений в состоянии здоровья использовали дискриминантный анализ (ДА). Дискриминацию проводили между группами: «низкая вероятность развития НЯ» (НВР НЯ), «возможно развитие НЯ» (ВР НЯ) и «высокая вероятность развития НЯ» (ВВР НЯ), сформированных с использованием разработанной методики. Ввиду того, что не все признаки отвечали критерию нормальности, а также анализировали качественные переменные (пол), был использован непараметрический вариант дискриминантного анализа, представленный в модуле GDA — Общие модели дискриминантного анализа (ОМДА) программы STATISTICA 10.0 [<xref ref-type="bibr" rid="cit4">4</xref>]. Дискриминантный анализ выполняли с оценкой всех эффектов при построении модели. В качестве критериев для отбора информативных дискриминантных переменных применяли статистику частная лямбда Уилкса (ЧЛУ). Значение ЧЛУ может изменяться от 1,0 (нет никакой дискриминации) до 0,0 (полная дискриминация), т. е. чем меньше ЧЛУ, тем информативность показателя выше. Дополнительно оценивали уровень F-критерия — чем больше значение, тем больше вклад эффекта в процедуру дискриминации. Также с использованием ОМДА были рассчитаны функции классификации и построены матрицы классификации выборок, позволяющие оценить эффективности классификации по совокупности всех анализируемых гендерно-возрастных и клинико-лабораторных показателей.</p><p>Дизайн исследования был разработан с учётом российских рекомендаций по проведению исследований третьей фазы [<xref ref-type="bibr" rid="cit5">5</xref>][<xref ref-type="bibr" rid="cit6">6</xref>][<xref ref-type="bibr" rid="cit7">7</xref>].</p><p>В рамках исследования производилась оценка иммуногенности и безопасности вакцины против вирусного гепатита А (ВГА) путём определения анти-ВГА антител у добровольцев от 18 до 59 лет при её двукратном введении. Дизайн исследования соответствовал требованиям к клиническим исследованиям вакцин, изложенным в руководстве по проведению клинических исследований лекарственных препаратов (ФГБУ «НЦЭСМП» Минздрава России, том 2, глава 5, 2012 г.), а также в руководстве Европейского агентства лекарственных средств по проведению клинических исследований вакцин. Было проведено рандомизированное двойное слепое сравнительное исследование в параллельных группах. Оценивался профиль безопасности вакцины как с точки зрения референтного препарата, так и с точки зрения препарата сравнения, т. е. параметры безопасности были объединены в ключе оценки интегрального анализа.</p><p>Количественный интегральный анализ безопасности включал 5 основных этапов.</p><p>Этап 1 — присвоение каждой из характеристик НЯ балльной оценки.</p><p>В ходе клинического исследования по оценке безопасности и иммуногенности вакцины против ВГА в соответствии с протоколом были оценены следующие характеристики НЯ: серьёзность, тяжесть проявления («тяжесть»), наличие связи с исследуемым препаратом («связь»), предпринятые меры в отношении НЯ («лечение»), предпринятые меры в отношении препарата («препарат») и исход явления («исход»). Дополнительно к требованиям протокола в настоящем исследовании анализировали общее количество НЯ у одного добровольца («количество НЯ»), количество общих постинъекционных реакций («количество ОР») и количество местных постинъекционных реакций («количество МР»). Принимая во внимание, что в ходе клинического исследования СНЯ не были зарегистрированы, а в качестве описания характеристики «препарат» приведены только две категории «приём препарата продолжен по запланированной протоколом схеме» и «не применимо», что свидетельствует об отсутствии её дискриминативной способности, представленная характеристика не была включена в дальнейший анализ.</p><p>Присвоенные унифицированные балльные оценки для каждой из анализируемых характеристик, ранжированные по порядку возрастания уровня потенциального неблагоприятного воздействия на организм, приведены в таблице 1. Для описания характеристики НЯ добровольцев, у которых нежелательные явления не зарегистрированы, введена категория «отсутствует». </p><table-wrap id="table-1"><caption><p> </p></caption><table><tbody><tr><td>Таблица 1. Балльные оценки характеристик нежелательных явлений по результатам клинических исследований вакцины против вирусного гепатита АTable 1. Scores for characteristics of adverse events based on the results of clinical trials of the anti-HAV vaccine</td></tr><tr><td>Характеристика НЯ/Characteristics of AEs</td><td>Описание характеристики/Description of characteristics</td><td>Балльная оценка/Score</td></tr><tr><td>Тяжесть/Severity</td><td>Отсутствует/Not available</td><td>3 балла/points</td></tr><tr><td>Лёгкая/Mild</td><td>2 балла/points</td></tr><tr><td>Умеренная/Moderate</td><td>1 балл/point</td></tr><tr><td>Связь/Relation</td><td>Отсутствует/None</td><td>7 баллов/points</td></tr><tr><td>Неклассифицируемая/Unclassifiable</td><td>6 баллов/points</td></tr><tr><td>Условная/Conditional</td><td>5 баллов/points</td></tr><tr><td>Сомнительная/Remote</td><td>4 балла/points</td></tr><tr><td>Возможная/Possible</td><td>3 балла/points</td></tr><tr><td>Вероятная/Probable</td><td>2 балла/points</td></tr><tr><td>Определённая/Certain</td><td>1 балл/point</td></tr><tr><td>Лечение/Treatment</td><td>Отсутствует/None</td><td>3 балла/points</td></tr><tr><td>Не предпринималось/Not available</td><td>2 балла/points</td></tr><tr><td>Медикаментозная терапия/Medication therapy</td><td>1 балл/point</td></tr><tr><td>Исход/Outcome</td><td>Отсутствует/None</td><td>3 балла/points</td></tr><tr><td>НЯ разрешилось/AE resolved</td><td>2 балла/points</td></tr><tr><td>Не известно/Not known</td><td>1 балл/point</td></tr><tr><td>Количество НЯ/Quantity AE</td><td>Отсутствует/None</td><td>5 баллов/points</td></tr><tr><td>1–3 НЯ/1–3 AE</td><td>4 балла/points</td></tr><tr><td>4–6 НЯ/4–6 AEs</td><td>3 балла/points</td></tr><tr><td>7–9 НЯ/7–9 AEs</td><td>2 балла/points</td></tr><tr><td>10 и более НЯ/10 and more AEs</td><td>1 балл/point</td></tr><tr><td>Количество ОР/Quantity GR</td><td>Отсутствует/None</td><td>5 баллов/points</td></tr><tr><td>1–3 НЯ/1–3 AE</td><td>4 балла/points</td></tr><tr><td>4–6 НЯ/4–6 AEs</td><td>3 балла/points</td></tr><tr><td>7–9 НЯ/7–9 AEs</td><td>2 балла/points</td></tr><tr><td>10 и более НЯ/10 and more AEs</td><td>1 балл/point</td></tr><tr><td>Количество МР/Quantity LR</td><td>Отсутствует/None</td><td>4 балла/points</td></tr><tr><td>1–3 НЯ/1–3 AE</td><td>3 балла/points</td></tr><tr><td>4–6 НЯ/4–6 AEs</td><td>2 балла/points</td></tr><tr><td>7–9 НЯ/7–9 AEs</td><td>1 балл/point</td></tr></tbody></table></table-wrap><p>Этап 2 — преобразование балльных оценок в нормированную количественную шкалу.</p><p>Для преобразование балльных оценок в нормированную количественную шкалу [<xref ref-type="bibr" rid="cit0">0</xref>][<xref ref-type="bibr" rid="cit1">1</xref>] использовали перевод порядковых признаков в нечёткое число с помощью аппарата теории нечётких множеств и применение функций принадлежности (ФП) нечётких множеств [<xref ref-type="bibr" rid="cit8">8</xref>]. Для построения ФП использовали апостериорный подход [<xref ref-type="bibr" rid="cit9">9</xref>]. На основе процедур, представленных в работе [<xref ref-type="bibr" rid="cit10">10</xref>], строили трапециевидные ФП для каждого из уровней (баллов) характеристик НЯ. Трапециевидная ФП описывается четырьмя основными точками: µ (х) = (k1, k2, k3, k4), где k2 и k3 — граничные значения интервала, на котором ФП принимает значение, равное 1, а точки k1 и k4 — левый и правый нуль функции, соответственно.</p><p>Результаты построения трапециевидных ФП для различных уровней (баллов) основных характеристик НЯ представлены в таблице 2. </p><table-wrap id="table-2"><caption><p>Примечания: НЯ — нежелательное явление; ОР — общие реакции; МР — местные реакции; ФП — функция принадлежности.</p><p>Notes: AE — Adverse Event; GR — General reactions; LR — Local reactions.</p></caption><table><tbody><tr><td>Таблица 2. Основные точки ФП балльных оценок характеристик НЯTable 2. Main points of membership functions of scores for AE characteristics</td></tr><tr><td>Характеристика НЯ/Characteristics of AEs</td><td>Балльная оценка/Score</td><td>Частота встречаемости/Occurrence Frequency</td><td>Координаты точек ФП/Coordinatesof points of membership functions(k1, k2, k3, k4)</td></tr><tr><td>Тяжесть/Severity</td><td>3 балла/points</td><td>0,140</td><td>(0,790; 0,930; 1,000; 1,000)</td></tr><tr><td>2 балла/points</td><td>0,794</td><td>(0,033; 0,099; 0,790; 0,930)</td></tr><tr><td>1 балл/point</td><td>0,066</td><td>(0,000; 0,000; 0,033; 0,099)</td></tr><tr><td>Связь/Relation</td><td>7 баллов/points</td><td>0,140</td><td>(0,859; 0,860; 1,000; 1,000)</td></tr><tr><td>6 баллов/points</td><td>0,001</td><td>(0,857; 0,859; 0,859; 0,860)</td></tr><tr><td>5 баллов/points</td><td>0,003</td><td>(0,854; 0,857; 0,857; 0,859)</td></tr><tr><td>4 балла/points</td><td>0,040</td><td>(0,795; 0,835; 0,854; 0,857)</td></tr><tr><td>3 балла/points</td><td>0,093</td><td>(0,676; 0,769; 0,795; 0,835)</td></tr><tr><td>2 балла/points</td><td>0,222</td><td>(0,389; 0,611; 0,676; 0,769)</td></tr><tr><td>1 балл/point</td><td>0,500</td><td>(0,000; 0,000; 0,389; 0,611)</td></tr><tr><td>Характеристика НЯ/Characteristics of AEs</td><td>Балльная оценка/Score</td><td>Частота встречаемости/Occurrence frequency</td><td>Координаты точек ФП/Coordinatesof points of membership functions(k1, k2, k3, k4)</td></tr><tr><td>Лечение/Treatment</td><td>3 балла/points</td><td>0,140</td><td>(0,790; 0,930; 1,000; 1,000)</td></tr><tr><td>2 балла/points</td><td>0,839</td><td>(0,010; 0,031; 0,790; 0,930)</td></tr><tr><td>1 балл/point</td><td>0,021</td><td>(0,000; 0,000; 0,010; 0,031)</td></tr><tr><td>Исход/Outcome</td><td>3 балла/points</td><td>0,140</td><td>(0,790; 0,930; 1,000; 1,000)</td></tr><tr><td>2 балла/points</td><td>0,858</td><td>(0,001; 0,002; 0,790; 0,930)</td></tr><tr><td>1 балл/point</td><td>0,001</td><td>(0,000; 0,000; 0,001; 0,002)</td></tr><tr><td>Количество НЯ/Quantity AE</td><td>5 баллов/points</td><td>0,420</td><td>(0,431; 0,730; 1,000; 1,000)</td></tr><tr><td>4 балла/points</td><td>0,299</td><td>(0,208; 0,355; 0,431; 0,730)</td></tr><tr><td>3 балла/points</td><td>0,147</td><td>(0,100; 0,167; 0,208; 0,355)</td></tr><tr><td>2 балла/points</td><td>0,067</td><td>(0,033; 0,100; 0,100; 0,167)</td></tr><tr><td>1 балл/point</td><td>0,067</td><td>(0,000; 0,000; 0,033; 0,100)</td></tr><tr><td>Количество ОР/Quantity GR</td><td>5 баллов/points</td><td>0,585</td><td>(0,290; 0,540; 1,000; 1,000)</td></tr><tr><td>4 балла/points</td><td>0,250</td><td>(0,116; 0,214; 0,290; 0,540)</td></tr><tr><td>3 балла/points</td><td>0,098</td><td>(0,047; 0,087; 0,116; 0,214)</td></tr><tr><td>2 балла/points</td><td>0,040</td><td>(0,013; 0,040; 0,047; 0,087)</td></tr><tr><td>1 балл/point</td><td>0,027</td><td>(0,000; 0,000; 0,013; 0,040)</td></tr><tr><td>Количество МР/Quantity LR</td><td>4 балла/points</td><td>0,589</td><td>(0,239; 0,583; 1,000; 1,000)</td></tr><tr><td>3 балла/points</td><td>0,344</td><td>(0,036; 0,098; 0,239; 0,583)</td></tr><tr><td>2 балла/points</td><td>0,063</td><td>(0,002; 0,007; 0,036; 0,098)</td></tr><tr><td>1 балл/point</td><td>0,004</td><td>(0,000; 0,000; 0,002; 0,007)</td></tr></tbody></table></table-wrap><p>Для получения из ФП количественных показателей (четкой оценки) балла проведена процедура дефаззификации центроидным способом по следующей формуле:</p><p>Полученные чёткие оценки (центроид Е) подверглись процедуре нормализации с использованием способа «отношение» (деление исходных значений на максимальное значение Е) [<xref ref-type="bibr" rid="cit11">11</xref>]. В результате нормализации данные, имеющие максимальный балл (7 баллов или 5 баллов и так далее), т. е. отнесённые к категории «отсутствует», получили числовую оценку «1» (таблица 3). </p><table-wrap id="table-3"><caption><p>Примечания: НЯ — нежелательное явление; ОР — общие реакции; МР — местные реакции; ФП — функция принадлежности.</p><p>Notes: AE — Adverse Event; GR — General reactions; LR — Local reactions.</p></caption><table><tbody><tr><td>Таблица 3. Результаты преобразования ФП балльных оценок в нормализованные значения на отрезке [0, 1]Table 3. Results of transforming membership functions of point estimates into normalized values on the segment [0, 1]</td></tr><tr><td>Характеристика НЯ/Characteristics of AEs</td><td>Балльная оценка/Score</td><td>Центроид/Center Е</td><td>Нормализованная четкая оценка/Normalized clear evaluation (En)</td></tr><tr><td>Тяжесть/Severity</td><td>3 балла/points</td><td>0,924</td><td>1,000</td></tr><tr><td>2 балла/points</td><td>0,463</td><td>0,501</td></tr><tr><td>1 балл/point</td><td>0,035</td><td>0,038</td></tr><tr><td>Связь/Relation</td><td>7 баллов/points</td><td>0,930</td><td>1,000</td></tr><tr><td>6 баллов/points</td><td>0,859</td><td>0,924</td></tr><tr><td>5 баллов/points</td><td>0,857</td><td>0,921</td></tr><tr><td>4 балла/points</td><td>0,833</td><td>0,896</td></tr><tr><td>3 балла/points</td><td>0,766</td><td>0,823</td></tr><tr><td>Характеристика НЯ/Characteristics of AEs</td><td>Балльная оценка/Score</td><td>Центроид/Center Е</td><td>Нормализованная четкая оценка/Normalized clear evaluation (En)</td></tr><tr><td>Связь/Relation</td><td>2 балла/points</td><td>0,604</td><td>0,649</td></tr><tr><td>1 балл/point</td><td>0,254</td><td>0,273</td></tr><tr><td>Лечение/Treatment</td><td>3 балла/points</td><td>0,924</td><td>1,000</td></tr><tr><td>2 балла/points</td><td>0,441</td><td>0,477</td></tr><tr><td>1 балл/point</td><td>0,011</td><td>0,012</td></tr><tr><td>Исход/Outcome</td><td>3 балла/points</td><td>0,924</td><td>1,000</td></tr><tr><td>2 балла/points</td><td>0,432</td><td>0,467</td></tr><tr><td>1 балл/point</td><td>0,001</td><td>0,001</td></tr><tr><td>Количество НЯ/Quantity AE</td><td>5 баллов/points</td><td>0,782</td><td>1,000</td></tr><tr><td>4 балла/points</td><td>0,440</td><td>0,563</td></tr><tr><td>3 балла/points</td><td>0,212</td><td>0,272</td></tr><tr><td>2 балла/points</td><td>0,100</td><td>0,129</td></tr><tr><td>1 балл/point</td><td>0,036</td><td>0,046</td></tr><tr><td>Количество ОР/Quantity GR</td><td>5 баллов/points</td><td>0,703</td><td>1,000</td></tr><tr><td>4 балла/points</td><td>0,299</td><td>0,425</td></tr><tr><td>3 балла/points</td><td>0,119</td><td>0,170</td></tr><tr><td>2 балла/points</td><td>0,048</td><td>0,068</td></tr><tr><td>1 балл/point</td><td>0,014</td><td>0,021</td></tr><tr><td>Количество МР/Quantity LR</td><td>4 балла/points</td><td>0,697</td><td>1,000</td></tr><tr><td>3 балла/points</td><td>0,252</td><td>0,362</td></tr><tr><td>2 балла/points</td><td>0,038</td><td>0,055</td></tr><tr><td>1 балл/point</td><td>0,002</td><td>0,003</td></tr></tbody></table></table-wrap><p>Этап 3 — определение весовых коэффициентов характеристик НЯ.</p><p>Для определения весовых коэффициентов характеристик НЯ была организована процедура экспертного опроса. В опросе принимали участие 6 экспертов — членов НКМД, организованного на базе ООО «Научно-исследовательский центр Эко-безопасность». Оценку информативности (весовых коэффициентов) каждой характеристики НЯ осуществляли методом парных сравнений (тест Саати) [<xref ref-type="bibr" rid="cit3">3</xref>].</p><p>Результатом проведения расчётов являлось получение весовых коэффициентов для характеристик НЯ (нормализованный собственный вектор матрицы парных сравнений). Пропорциональность предпочтений каждого эксперта оценивали на основе отношения согласованности (ОС), которое для всех экспертов было менее 10 %.</p><p>Результаты усреднения данных (среднее геометрическое значение) экспертного опроса представлены в таблице 4. </p><table-wrap id="table-4"><caption><p>Примечания: НЯ — нежелательное явление; ОР — общие реакции; МР — местные реакции.</p><p>Notes: AE — Adverse Event; GR — General reactions; LR — Local reactions.</p></caption><table><tbody><tr><td>Таблица 4. Результаты оценки информативности (веса) анализируемых характеристик НЯTable 4. Results of assessing the information content (weight) of the analyzed characteristics of AEs</td></tr><tr><td>Характеристика НЯ/Characteristics of AEs</td><td>Вес/ Weight (ωi)</td></tr><tr><td>Количество НЯ/Quantity AE</td><td>0,359</td></tr><tr><td>Количество ОР/Quantity GR</td><td>0,234</td></tr><tr><td>Количество МР/Quantity LR</td><td>0,163</td></tr><tr><td>Лечение/Treatment</td><td>0,108</td></tr><tr><td>Тяжесть/Severity</td><td>0,075</td></tr><tr><td>Связь/Relation</td><td>0,036</td></tr><tr><td>Исход/Outcome</td><td>0,025</td></tr></tbody></table></table-wrap><p>Этап 4 — агрегация данных для получения интегрального показателя на системно-органном и организменном уровнях.</p><p>Всего в ходе исследования было установлено 576 НЯ, которые были классифицированы по органам и системам с использованием SOC MedDRA (версия 27.0).</p><p>Для получения системного интегрального показателя (WS) балльных оценок всех характеристик каждого НЯ проводили интеграцию взвешенных (ωi) нормализованных чётких оценок балла (Eni), соответствующих установленной характеристике НЯ, по следующей формуле:</p><p>, где</p><p>i — характеристика НЯ;</p><p>N — количество характеристик НЯ.</p><p>Если у одного добровольца были установлены несколько НЯ по одной из систем, для анализа оставляли одно явление с наиболее неблагоприятными характеристиками (Ws — минимальная). В результате дополнительного отбора из 576 НЯ для окончательного анализа были выделены 253 НЯ, которые были связаны: в 125 случаях (49,4 %) с общими нарушениями и реакциями в месте введения, в 41 случае (16,2 %) с нарушениями со стороны нервной системы, в 40 случаях (15,8 %) с нарушениями со стороны мышечной, скелетной и соединительной ткани, в 14 случаях (5,5 %) с инфекциями и инвазиями, в 14 случаях (5,5 %) с желудочно-кишечными нарушениями, в 13 случаях (5,2 %) с нарушениями со стороны дыхательной системы, в 2 случаях (0,8 %) с нарушениями метаболизма и питания, в 2 случаях (0,8 %) с нарушениями со стороны крови и лимфатической системы, в 1 случае (0,4 %) с психическими расстройствами и в 1 случае (0,4 %) с лабораторными и инструментальными данными. У 94 добровольцев НЯ не установлены.</p><p>Из 224 добровольцев, принимавших участие в исследовании, НЯ были установлены у 130 человек, что при общем количестве принятых к анализу НЯ (253) обусловило наличие нескольких НЯ по различным системам у отдельных добровольцев.</p><p>Для получения общего индивидуального интегрального показателя (WI), характеризующего побочные действия анализируемых препаратов на организменном уровне у одного добровольца, проводили интеграцию взвешенных (ωSi) системных показателей (WSi) по всем установленным системам по следующей формуле:</p><p>, где</p><p>i — системы организма;</p><p>N — количество анализируемых систем у одного добровольца.</p><p>Примечание: SOC MedDRA — класс системы органов международного словаря нежелательных реакций, возникающих при применении лекарственных препаратов для медицинского применения.</p><p>Note: SOC MedDRA — System Organ Class of Medical Dictionary for Regulatory Activities.</p><p>Для получения весовых коэффициентов отдельных систем организма (ωSi) была проанализирована частота нежелательных реакций по отдельным системам организма — чем больше относительная частота встречаемости в настоящем исследовании, тем более «неблагоприятна» данная система и, соответственно, больше значение веса. Результаты оценки информативности анализируемых систем организма, полученные с использованием метода Фишберна [<xref ref-type="bibr" rid="cit12">12</xref>], представлены в таблице 5.</p><table-wrap id="table-5"><table><tbody><tr><td>Таблица 5. Результаты оценки информативности (веса) анализируемых систем организмаTable 5. Results of assessing the information content (weight) of the analyzed body systems</td></tr><tr><td>Органы и системы по SOC MedDRA (версия 27.0)/Organs and systems according to SOC MedDRA (version 27.0)</td><td>Вес / Weight (ωSi)</td></tr><tr><td>10018065 Общие нарушения и реакции в месте введения</td><td>0,250</td></tr><tr><td>10029205 Нарушения со стороны нервной системы</td><td>0,214</td></tr><tr><td>10028395 Нарушения со стороны мышечной, скелетной и соединительной ткани</td><td>0,179</td></tr><tr><td>10021881 Инфекции и инвазии</td><td>0,143</td></tr><tr><td>10017947 Желудочно-кишечные нарушения</td><td>0,143</td></tr><tr><td>10038738 Нарушения со стороны дыхательной системы, органов грудной клетки и средостения</td><td>0,107</td></tr><tr><td>10027433 Нарушения метаболизма и питания</td><td>0,071</td></tr><tr><td>10005329 Нарушения со стороны крови и лимфатической системы</td><td>0,071</td></tr><tr><td>10037175 Психические расстройства</td><td>0,036</td></tr><tr><td>10022891 Лабораторные и инструментальные данные</td><td>0,036</td></tr></tbody></table></table-wrap><p>Этап 5 — интерпретация результатов для принятия решения на основе разработанных критериев и полученного уровня интегрального показателя.</p><p>Интерпретация индивидуальных показателей на системно-органном уровне.</p><p>Для принятия решения по результатам проведенного анализа индивидуальных показателей на системно-органном уровне использовали трехуровневую шкалу желательности Харрингтона (таблица 6), где Di — интегральный индивидуальный показатель. </p><table-wrap id="table-6"><caption><p>Примечания: НЯ — нежелательное явление; Di — интегральный индивидуальный показатель.</p><p>Notes: AE — Adverse Event; Di — integral individual indicator.</p></caption><table><tbody><tr><td>Таблица 6. Соответствие диапазонов шкалы Харрингтона уровням интегральных и системных показателей и заключений о вероятности развития НЯ по каждому добровольцуTable 6. Correspondence of the ranges of the Harrington scale to the levels of integral and systemic indicatorsand conclusions about the likelihood of developing AE for each volunteer</td></tr><tr><td>Диапазоны значений шкалы Харрингтона/Harrington scale ranges</td><td>Характеристика уровня индивидуальной оценки/Characteristics of the levelof individual assessment</td><td>Заключение/Conclusion</td></tr><tr><td>1,00 ≥ Di ≥ 0,37</td><td>Отсутствие отклонений/No Deviations</td><td>Низкая вероятность развития НЯ/Low likelihood of adverse events developing</td></tr><tr><td>0,37 &gt; Di ≥ 0,20</td><td>Умеренные отклонения/Moderate Deviations</td><td>Возможно развитие НЯ/The development of adverse events is possible</td></tr><tr><td>Di &lt; 0,20</td><td>Выраженные отклонения/Expressed deviations</td><td>Высокая вероятность развития НЯ/High likelihood of adverse events developing</td></tr></tbody></table></table-wrap><p>Применительно к настоящему исследованию интегральный индивидуальный показатель Di шкалы Харрингтона соответствует системному интегральному индивидуальному показателю (WS).</p><p>Заключение о вероятности развития НЯ на основе индивидуальных показателей было сделано на основании заключений по отдельным группам исследуемого препарата (ИП) и препарата сравнения (ПС) по критериям:</p><p>— «НЯ не выявлены», если:</p><p>а) 100 % в обоих группах — низкая вероятность развития НЯ;</p><p>б) 100 % в группе ИП — низкая вероятность развития НЯ, до 40 % в группе ПС — возможно развитие НЯ.</p><p>— «НЯ выявлены», если:</p><p>а) более 40 % в обоих группах — высокая вероятность развития НЯ;</p><p>б) более 40 % в группе ИП — высокая вероятность развития НЯ, независимо от количества добровольцев с высокой вероятностью развития НЯ в группе ПС;</p><p>в) более 40 % добровольцев группах ИП или ПС по одной из систем — высокая вероятность развития НЯ.</p><p>— «Неопределённый результат», если не соблюдены условия для случаев «НЯ не выявлены» и «НЯ выявлены».</p><p>В таблице 7 представлена характеристика частот встречаемости различных уровней интегральной оценки по системам организма (органоспецифические нарушения) исследуемого препарата и препарата сравнения.</p><table-wrap id="table-7"><table><tbody><tr><td>Таблица 7. Характеристики частот встречаемости, n (%), различных уровней интегральной индивидуальной оценки по системам организма для анализируемых групп вакцин — исследуемого препарата (ИП) и препарата сравнения (ПС)Table 7. Characteristics of frequency of occurrence, n (%), of various levels of integral individual assessment by body system for the analytical vaccine groups — Investigational Drug / ID (Comparison Drug / CD)</td></tr><tr><td>SOC MedDRA</td><td>Уровни индивидуальной оценкидля ИП/ Levels of individual assessment for ID (N=112)</td><td>Уровни индивидуальной оценки для ПС/Levels of individual assessment for CD (N=112)</td></tr><tr><td>Отсутствие отклонений/No deviations</td><td>Умеренные отклонения/Moderate deviations</td><td>Выраженные отклонения/Severe deviations</td><td>Отсутствие отклонений/No deviations</td><td>Умеренные отклонения/Moderate deviations</td><td>Выраженные отклонения/Severe deviations</td></tr><tr><td>Отсутствие НЯ/No AEs</td><td>55 (49,1 %)</td><td>0 (0,0 %)</td><td>0 (0,0 %)</td><td>39 (34,8 %)</td><td>0 (0,0 %)</td><td>0 (0,0 %)</td></tr><tr><td>10018065 Общие нарушения и реакции в месте введения/General disorders and reactionsat the injection site</td><td>37 (33,0 %)</td><td>14 (12,5 %)</td><td>3 (2,7 %)</td><td>46 (41,1 %)</td><td>15 (13,4 %)</td><td>10 (8,9 %)</td></tr><tr><td>10028395 Нарушения со стороны мышечной, скелетной и соединительной ткани/Muscle, skeletal and connective tissue disorders</td><td>8 (7,1 %)</td><td>9 (8,0 %)</td><td>2 (1,8 %)</td><td>7 (6,3 %)</td><td>9 (8,0 %)</td><td>5 (4,5 %)</td></tr><tr><td>10038738 Нарушения со стороны дыхательной системы, органов грудной клетки и средостения/Respiratory, thoracic and mediastinal disorders</td><td>6 (5,4 %)</td><td>3 (2,7 %)</td><td>0 (0,0 %)</td><td>1 (0,9 %)</td><td>1 (0,9 %)</td><td>2 (1,8 %)</td></tr><tr><td>10029205 Нарушения со стороны нервной системы/Nervous system disorders</td><td>6 (5,4 %)</td><td>9 (8,0 %)</td><td>2 (1,8 %)</td><td>9 (8,0 %)</td><td>9 (8,0 %)</td><td>6 (5,4 %)</td></tr><tr><td>10021881 Инфекции и инвазии/Infections and infestations</td><td>2 (1,8 %)</td><td>2 (1,8 %)</td><td>1 (0,9 %)</td><td>2 (1,8 %)</td><td>5 (4,5 %)</td><td>2 (1,8 %)</td></tr><tr><td>10017947 Желудочно-кишечные нарушения/Gastrointestinal disorders</td><td>2 (1,8 %)</td><td>3 (2,7 %)</td><td>1 (0,9 %)</td><td>3 (2,7 %)</td><td>4 (3,6 %)</td><td>1 (0,9 %)</td></tr><tr><td>10037175 Психические расстройства/Mental Disorders</td><td>1 (0,9 %)</td><td>0 (0,0 %)</td><td>0 (0,0 %)</td><td>0 (0,0 %)</td><td>0 (0,0 %)</td><td>0 (0,0 %)</td></tr><tr><td>10005329 Нарушения со стороны крови и лимфатической системы/Blood and lymphatic system disorders</td><td>1 (0,9 %)</td><td>0 (0,0 %)</td><td>0 (0,0 %)</td><td>1 (0,9 %)</td><td>0 (0,0 %)</td><td>0 (0,0 %)</td></tr><tr><td>10022891 Лабораторные и инструментальные данные/Laboratory and instrumental data</td><td>0 (0,0 %)</td><td>0 (0,0 %)</td><td>0 (0,0 %)</td><td>0 (0,0 %)</td><td>1 (0,9 %)</td><td>0 (0,0 %)</td></tr><tr><td>10027433 Нарушения метаболизма и питания/Metabolic and nutritional disorders</td><td>0 (0,0 %)</td><td>0 (0,0 %)</td><td>0 (0,0 %)</td><td>2 (1,8 %)</td><td>0 (0,0 %)</td><td>0 (0,0 %)</td></tr></tbody></table></table-wrap><p>Анализ данных таблицы 7 показал наличие добровольцев с «выраженными отклонениями» по SOC MedDRA для препаратов ИП/ПС в следующих системах: «10018065 Общие нарушения и реакции в месте введения» — 2,7 %/8,9 %, «10028395 Нарушения со стороны мышечной, скелетной и соединительной ткани» — 1,8 %/4,5 %, «Нарушения со стороны дыхательной системы, органов грудной клетки и средостения» — 0 %/1,8 %, «10029205 Нарушения со стороны нервной системы» — 1,8 %/5,4 %, «10021881 Инфекции и инвазии» — 0,9 %/1,8 %, «10017947 Желудочно-кишечные нарушения» — 0,9 %/0,9 %. Общая доля лиц с высокой вероятностью развития НЯ по системам организма в группе ИП составила 8,0 %, в группе ПС — 23,2 %.</p><p>Численность добровольцев с «умеренными отклонениями» по всем анализируемым органам и системам составила 35,7 % в группе ИП и 39,3 % в группе ПС.</p><p>В соответствии с представленными критериями по результатам интерпретации индивидуальных показателей по системам организма было сделано заключение «Неопределенный результат», что свидетельствует о наличии у отдельных добровольцев неблагоприятных изменения в состоянии различных органов и систем, не требующих проведения дополнительных обследований для установления причинно-следственных связей с приёмом препаратов и позволяющих перейти к этапу оценки групповых показателей.</p><p>Примечания: SOC MedDRA — класс системы органов международного словаря нежелательных реакций, возникающих при применении лекарственных препаратов для медицинского применения; ИП — исследуемый препарат; НЯ — нежелательное явление; ПС — препарат сравнения.</p><p>Notes: AE — Adverse Event; CD–Comparison Drug; ID–Investigational Drug; SOC MedDRA — System Organ Class of Medical Dictionary for Regulatory Activities.</p><p>В таблице 8 представлена характеристика частот встречаемости различных уровней интегральной оценки на организменном уровне (общие нарушения) исследуемого препарата и препарата сравнения.</p><table-wrap id="table-8"><table><tbody><tr><td>Общие нарушения/General disorders</td><td>95 (84,8 %)</td><td>15 (13,4 %)</td><td>2 (1,8 %)</td><td>88 (78,6 %)</td><td>15 (13,4 %)</td><td>9 (8,0 %)</td></tr></tbody></table></table-wrap><p>В соответствии с представленными критериями по результатам интерпретации индивидуальных показателей на организменном уровне было сделано заключение «Неопределённый результат», аналогичное по содержательной части характеристике для органоспецифических нарушений, что определяет целесообразность продолжения анализа на основе оценки групповых показателей общих нарушений.</p><p>Интерпретация групповых показателей. Для принятия решения по результатам проведённого анализа групповых показателей использовали трёхуровневую шкалу желательности Харрингтона (таблица 9), где Dg — интегральный групповой показатель. </p><table-wrap id="table-9"><caption><p>Примечания: SOC MedDRA — класс системы органов международного словаря нежелательных реакций, возникающих при применении лекарственных препаратов для медицинского применения; ИП — исследуемый препарат; ПС — препарат сравнения.</p><p>Notes: CD–Comparison Drug; ID–Investigational Drug; SOC MedDRA — System Organ Class of Medical Dictionary for Regulatory Activities.</p><p>Примечания: НЯ — нежелательное явление; Dg — интегральный групповой показатель.</p><p>Notes: AE — Adverse Event; Dg — integral group indicator.</p></caption><table><tbody><tr><td>Таблица 9. Соответствие диапазонов шкалы Харрингтона уровням групповой оценки интегральных и системных показателей и заключений о вероятности развития НЯ по группеTable 9. Correspondence of the ranges of the Harrington scale to the levels of group assessment of integral and systemic indicators and conclusions about the probability of developing AE in the group</td></tr><tr><td>Диапазоны значений шкалы Харрингтона/Harrington scale ranges</td><td>Характеристика уровня групповой оценки/Characteristics of the level of group evaluation</td><td>Заключение по группе/Group Conclusion</td></tr><tr><td>1,00 ≥ Dg ≥ 0,37</td><td>В пределах референтных диапазонов/Within reference ranges</td><td>Низкая вероятность развития НЯ/Low likelihood of adverse events developing</td></tr><tr><td>0,37 &gt; Dg ≥ 0,20</td><td>Незначительно выходящийза пределы референтных диапазонов/Slightly out of reference ranges</td><td>Возможно развитие НЯ/The development of adverse events is possible</td></tr><tr><td>Dg &lt; 0,20</td><td>Значительно выходящийза пределы референтных диапазонов/Significantly outside of reference ranges</td><td>Высокая вероятность развития НЯ/High likelihood of adverse events developing</td></tr></tbody></table></table-wrap><p>Заключение о вероятности развития НЯ на основе групповых показателей было сделано на основании заключений по отдельным группам исследуемого препарата (ИП) и препарата сравнения (ПС) по критериям:</p><p>— «НЯ не выявлены», если:</p><p>а) все группы — низкая вероятность развития НЯ;</p><p>б) группа ИП — низкая вероятность развития НЯ, группа ПС — возможно развитие НЯ.</p><p>— «НЯ выявлены», если:</p><p>а) все группы — высокая вероятность развития НЯ;</p><p>б) системные показатели групп ИП или ПС — высокая вероятность развития НЯ.</p><p>— «Неопределённый результат», если:</p><p>а) все группы — возможно развитие НЯ;</p><p>б) группа ПС — высокая вероятность развития НЯ, независимо от группового заключения группы ИП.</p><p>В таблице 10 представлена количественная интегральная оценка общих нарушений (организменный уровень) для групп ИП и ПС. Как медианные, так и средние групповые показатели относились к диапазону от 0,37 до 1,0, т. е. «находились в пределах референтных диапазонов», что в соответствии с представленными критериями позволило прийти к итоговому заключения по групповым показателям «Низкая вероятность развития НЯ». Необходимо отметить, что уровень медианных значений количественных характеристики НЯ в группе ИП был статистически значимо на 11 % (р=0,042) выше (более благоприятный уровень) в сравнении с группой ПС.</p><table-wrap id="table-10"><caption><p>Примечания: р — p-значение в тесте Манна-Уитни; N — количество субъектов в группе; M — среднее арифметическое значение; SD — стандартное отклонение; Min — минимальное значение; Max — максимальное значение; Me — медиана; LQ — нижний квартиль; UQ — верхний квартиль.</p><p>Notes: p — p-value in Mann-Whitney test; N — number of subjects in the group; M — arithmetic mean; SD — standard deviation; Min — minimum value; Max — maximum value; Me — median; LQ — lower quartile; UQ — upper quartile.</p></caption><table><tbody><tr><td>Таблица 10. Результаты групповой оценки общих нарушений на основе количественных характеристик НЯTable 10. Results of group assessment of general disorders based on quantitative characteristics of AEs</td></tr><tr><td>Группа</td><td>N</td><td>M</td><td>SD</td><td>Min</td><td>Max</td><td>Me</td><td>LQ</td><td>UQ</td><td>р</td></tr><tr><td>Исследуемый препарат/Investigational Drug</td><td>112</td><td>0,723</td><td>0,290</td><td>0,157</td><td>1,000</td><td>0,669</td><td>0,471</td><td>1,000</td><td>0,042</td></tr><tr><td>Препарат сравнения/Comparison Drug</td><td>112</td><td>0,636</td><td>0,294</td><td>0,143</td><td>1,000</td><td>0,602</td><td>0,412</td><td>1,000</td></tr></tbody></table></table-wrap><p>Полученные результаты углублённого анализа НЯ свидетельствует об отсутствии необходимости дополнительных экспертных оценок безопасности вакцины против ВГА или повторного проведения клинического исследования, что совпадает с результатами базового клинического исследования.</p><p>Принимая во внимание, что риск развития нежелательных реакций существенно зависит от специфических особенностей субъекта исследования [<xref ref-type="bibr" rid="cit13">13</xref>], а принципиальной особенностью разработанного метода является получение индивидуализированного количественного показателя на основе интеграции качественных параметров НЯ, представилась возможности установления лиц с повышенной индивидуальной чувствительностью к введению вакцины (осуществление прогноза развития неблагоприятных реакций). В качестве критериев для отнесения добровольца к категории повышенной индивидуальной чувствительности являлись характеристика уровня индивидуальной интегральной оценки — к ней отнесены лица с ВРН НЯ (0,37 &gt; Di ≥ 0,20) и ВВРН НЯ (Di &lt; 0,20) по шкале Харрингтона (группа повышенной индивидуальной чувствительности (ГПИЧ)). В другую группу (группа умеренной индивидуальной чувствительности (ГУИЧ)) вошли добровольцы с НВРН НЯ (1,00 ≥ Di ≥ 0,37), включая лиц, у которых НЯ не установлены. В качестве зависимых переменных (прогностических признаков) выступали результаты обследования добровольцев на этапе скрининга. Оценивали информативность отдельных показателей и эффективность классификации — способность дискриминировать (различать) группы с использованием комплекса показателей.</p><p>Для оценки информативности отдельных гендерно-возрастных и клинико-лабораторных показателей использовали ОМДА. В качестве критериев для оценки информативности переменных применяли статистику ЧЛУ, значение F-критерия и уровень статистической значимости показателя. Статистически значимым принимали уровень меньше или равно 0,05.</p><p>Показателем информативности совокупности дискриминантных переменных и эффективности применения дискриминантной функции для интерпретации межгрупповых различий явился процент правильно распознанных объектов. Доля правильно распознанных объектов свидетельствует о степени соответствия дискриминантной модели эмпирическим данным.</p><p>Для оценки возможности выделения лиц с различным уровнем индивидуальной чувствительности к вакцинации использовали данные количественного интегрального анализа НЯ по системам у каждого добровольца, включая лиц с отсутствием НЯ, а также соответствующие гендерно-возрастные и клинико-лабораторные данные, полученные на этапе скрининга (37 показателей).</p><p>В таблице 11 представлены клинико-лабораторные показатели добровольцев на этапе скрининга, дискриминирующие группы ГПИЧ и ГУИЧ в порядке убывания их эффективности (в порядке уменьшения F-статистики) с присвоением соответствующих ранговых мест (приведены только те показатели, у которых значение F-статистики было больше 1). </p><table-wrap id="table-11"><caption><p>Примечания: * — F-статистика статистически значима (р ≤0,05); ГПИЧ — группа повышенной индивидуальной чувствительности; ГУИЧ — группа умеренной индивидуальной чувствительности; ИМТ — индекс массы тела; ДАД — диастолическое артериальное давление; ГГТП — гамма-глутамилтранспептидаза; САД — систолическое артериальное давление; ЧСС — частота сердечных сокращений; ЧДД — частота дыхательных движений; ТТ — температура тела.</p><p>Notes: * — F-statistic is statistically significant (p ≤0,05); GIIS — the group of increased individual sensitivity; GMIS — group of moderate individual sensitivity; BMI — body mass index; DBP — diastolic blood pressure; GGTP — gamma-glutamyltranspeptidase; SBP — systolic blood pressure; HR — heart rate; RR — respiratory rate; BT — body temperature.</p></caption><table><tbody><tr><td>Вес/Weight</td><td>0,944</td><td>18,414</td><td>&lt;0,0001*</td><td>1</td></tr><tr><td>ИМТ/BMI</td><td>0,951</td><td>15,966</td><td>&lt;0,0001*</td><td>2</td></tr><tr><td>Рост/Height</td><td>0,953</td><td>15,414</td><td>0,0001*</td><td>3</td></tr><tr><td>Общий белок/Total protein</td><td>0,957</td><td>14,015</td><td>0,0002*</td><td>4</td></tr><tr><td>ДАД/DBP</td><td>0,959</td><td>13,150</td><td>0,0003*</td><td>5</td></tr><tr><td>ГГТП/GGTP</td><td>0,965</td><td>11,231</td><td>0,001*</td><td>6</td></tr><tr><td>САД/SBP</td><td>0,974</td><td>8,397</td><td>0,004*</td><td>7</td></tr><tr><td>Глюкоза/Glucose</td><td>0,980</td><td>6,430</td><td>0,012*</td><td>8</td></tr><tr><td>Интервал PQ/PQ interval</td><td>0,992</td><td>2,664</td><td>0,104</td><td>9</td></tr><tr><td>Эритроциты/Erythrocytes</td><td>0,992</td><td>2,642</td><td>0,105</td><td>10</td></tr><tr><td>ЧСС/HR</td><td>0,992</td><td>2,624</td><td>0,106</td><td>11</td></tr><tr><td>Общий билирубин/Total bilirubin</td><td>0,993</td><td>2,083</td><td>0,150</td><td>12</td></tr><tr><td>Гемоглобин/Hemoglobin</td><td>0,994</td><td>1,740</td><td>0,188</td><td>13</td></tr><tr><td>Возраст/Age</td><td>0,995</td><td>1,609</td><td>0,206</td><td>14</td></tr><tr><td>Удельный вес мочи/Specific gravity of urine</td><td>0,996</td><td>1,248</td><td>0,265</td><td>15</td></tr><tr><td>ЧДД/RR</td><td>0,996</td><td>1,232</td><td>0,268</td><td>16</td></tr><tr><td>ТТ/BT</td><td>0,996</td><td>1,211</td><td>0,272</td><td>17</td></tr><tr><td>Комплекс QRS/QRS complex</td><td>0,996</td><td>1,191</td><td>0,276</td><td>18</td></tr><tr><td>Тромбоциты/Platelets</td><td>0,996</td><td>1,102</td><td>0,295</td><td>19</td></tr></tbody></table></table-wrap><p>Анализ данных таблицы 11 показал, что только 8 из 37 показателей вносили статистически значимый вклад в дискриминацию групп ГПИЧ и ГУИЧ. Большинство переменных, включая пол добровольцев, существенно не различались между анализируемыми группами. Необходимо отметить, что даже показатели со статистически значимыми уровнями F-статистики по значениям ЧЛУ были близки к 1, что свидетельствует об их низкой информативности. Полученные результаты показали, что несмотря на статистически значимый вклад, который, вероятно, связан со значительным объёмом анализируемых выборок, «клиническая значимость» (важность для разделения групп) отдельных показателей не высока.</p><p>С использованием совокупности клинических показателей были рассчитаны функции классификации и построены матрицы классификации выборок (таблица 12). </p><table-wrap id="table-12"><table><tbody><tr><td>Таблица 12. Наблюдаемое и предсказанное распределение по исследуемым группам с использованием клинико-лабораторных показателей на этапе скрининга добровольцев (матрица классификации)Table 12. Observed and predicted distribution by study groups using gender-age and anthropometric indicatorsat the stage of screening volunteers (classification matrix)</td></tr><tr><td>Характеристика матрицы классификации/Characteristics of the classification matrix</td></tr><tr><td>Наблюдаемое распределение/Observed distribution</td><td>Предсказанное распределение/Predicted distribution</td><td>Доля правильной классификации, %/Proportion of correct classification, %</td></tr><tr><td>Группа добровольцев/Group of volunteers</td><td>Количество субъектов в группе/Number of subjects per group</td><td>Группа добровольцев/Group of volunteers</td></tr><tr><td>ГУИЧ/GMIS</td><td>ГПИЧ/GIIS</td></tr><tr><td>ГУИЧ/GMIS</td><td>228</td><td>198</td><td>30</td><td>86,8</td></tr><tr><td>ГПИЧ/GIIS</td><td>119</td><td>44</td><td>75</td><td>63,0</td></tr><tr><td>Всего/Total</td><td> </td><td>78,7</td></tr></tbody></table></table-wrap><p>Анализ данных, представленных в таблице 12, показал, что использование клинико-лабораторных переменных позволяет достичь достаточно высокого общего уровня дискриминации — около 79 %, однако в группе ГПИЧ доля правильной классификации составила всего 63 %. Относительно невысокий уровень правильной классификации в группе лиц, обладающих возможной повышенной чувствительностью к вакцинам для профилактики вирусного гепатита А, на наш взгляд, связан с использованием неспецифических показателей, полученных на этапе скринирования добровольцев. Принимая во внимание, что НЯ установлены по 10 системам организма, очевидна необходимость разработки алгоритмов с использование специфических показателей, позволяющих выявлять лиц с высокой индивидуальной чувствительностью по отдельным системно-органным комплексам.</p><p>Также необходимо учитывать, что полученные значения правильной классификации получены на т. н. «обучающей» выборке. При использовании «экзаменующей» выборки итоговые значения эффективности классификации с высокой вероятностью были бы значительно меньше, однако принципиальная возможность прогнозирования развития неблагоприятных отклонений в состоянии организма при вакцинации, на наш взгляд, показана.</p><p>Примечания: ГУИЧ — группа умеренной индивидуальной чувствительности; ГПИЧ — группа повышенной индивидуальной чувствительности.</p><p>Notes: GMIS — group of moderate individual sensitivity; GIIS — group of increased individual sensitivity.</p></sec><sec><title>Заключение / Conclusion</title><p>В ходе выполнения настоящей работы на примере вакцин для активной профилактики вирусного гепатита А апробированы все этапы количественного интегрального анализа на системно-органном и организменном уровнях. Полученные данные свидетельствовали об отсутствии необходимости дополнительной экспертной оценки или повторного проведения клинического исследования.</p><p>Из 576 НЯ, установленных в ходе клинических исследований, выделены 253 НЯ с наиболее неблагоприятными характеристиками (по одному НЯ на каждую систему организма), включая добровольцев с «высокой вероятностью развития НЯ» (8,0 % в группе ИП и 23,2 % в группе ПС) и «возможным развитием НЯ» (35,7 % в группе ИП и 39,3 % в группе ПС), которых можно отнести к категории лиц с повышенной индивидуальной чувствительностью после введения вакцин для профилактики вирусного гепатита А.</p><p>На системно-органном уровне НЯ у лиц с повышенной индивидуальной чувствительностью были связаны с общими нарушениями и реакциями в месте введения, нарушениями со стороны нервной системы, нарушениями со стороны мышечной, скелетной и соединительной ткани, с инфекциями и инвазиями, с желудочно-кишечными нарушениями, нарушениями со стороны дыхательной системы и с лабораторными и инструментальными данными.</p><p>В целом установленные НЯ соответствовали перечню нежелательных реакций, представленных в протоколе исследования, однако приведенная в протоколе частота встречаемости большинства из них (за исключением общих нарушений и реакций в месте введения) — нечасто (&gt; 1/1 000 и &lt; 1/100), редко (&gt; 1/10 000 и &lt; 1/1 000), была ниже аналогичного показателя в настоящем исследовании, что, возможно, потребует уточнения характеристики «частота встречаемости нежелательных реакций» для вакцины против ВГА.</p><p>С использованием дискриминантного анализа проведена оценка информативности отдельных гендерно-возрастных и клинико-лабораторных показателей, полученных во время скрининга добровольцев, для разделения групп лиц с повышенной и умеренной индивидуальной чувствительностью к введению вакцин для профилактики вирусного гепатита А. Установлено, что только 8 из 37 показателей, к которым относились антропометрические характеристики, жизненно-важные показатели, данные биохимического анализа крови, вносили статистически значимый вклад в разделение анализируемых групп. Однако необходимо отметить низкую информативность представленных показателей, оцененную с использованием частной лямбды Уилкса, что свидетельствует о недостаточной специфичности признаков среди данных скринингового обследования для прогноза развития неблагоприятных отклонений в состоянии здоровья.</p><p>Общий уровень дискриминации анализируемых групп на основе данных скринингового обследования добровольцев, оцененный с использованием функции классификации, составил около 79 %. Доля правильной классификации группы лиц с повышенной индивидуальной чувствительностью к введению препарата составила 63 %, что, на наш взгляд, является достаточно приемлемым уровнем с учётом используемого набора прогностических признаков.</p><p>Проведённая апробация индивидуализированного интегрального анализа нежелательных явлений при клинических испытаниях вакцин показала перспективность его применения для выделения лиц с повышенной индивидуальной чувствительностью в ходе вакцинопрофилактики на основе исходных гендерно-возрастных, демографических и клинико-лабораторных показателей.</p><p>Выбор показателей для прогноза развития неблагоприятных отклонений в состоянии здоровья при использовании вакцин для активной профилактики вирусного гепатита А должен основываться на специфических маркерах поражения органов и систем, ранее описанных для представленной группы препаратов, с учётом частоты встречаемости нежелательных реакций, включая данные автоматизированной информационной системы «Фармаконадзор».</p><p>Для повышения эффективности прогнозирования целесообразно объединение исходных данных о нежелательных реакциях при применении вакцин со сходными органоспецифическими и системными нарушениями как в ходе клинических исследований, так и по данным автоматизированной информационной системы «Фармаконадзор», а также расширение методов математико-статистической обработки данных, включая нейросетевой анализ.</p></sec></body><back><ref-list><title>References</title><ref id="cit1"><label>1</label><citation-alternatives><mixed-citation xml:lang="ru">Верведа АБ, Василюк ВБ, Сыраева ГИ, Фарапонова МВ. Оптимизация подходов к анализу нежелательных явлений при проведении клинических исследований биоэквивалентности. Безопасность и риск фармакотерапии. 2024;12(1):24-34.</mixed-citation><mixed-citation xml:lang="en">Verveda AB, Vasilyuk VB, Syraeva GI, Faraponova MV. Optimisation of Approaches to Adverse Event Analysis in Bioequivalence Clinical Trials. Safety and Risk of Pharmacotherapy. 2024;12(1):24-34 (In Russ.).</mixed-citation></citation-alternatives></ref><ref id="cit2"><label>2</label><citation-alternatives><mixed-citation xml:lang="ru">Верведа А.Б., Василюк В.Б., Сыраева Г.И., Фарапонова М.В., Попов А.В. Реализация количественного интегрального анализа при оценке нежелательных явлений при проведении клинических исследований: в фокусе трастузумаб. Качественная клиническая практика. 2024;(4):21-34. Doi: 10.37489/2588-0519-2024-4-21-34. EDN: ZEWDXG</mixed-citation><mixed-citation xml:lang="en">Verveda A.B., Vasilyuk V.B., Syraeva G.I., Faraponova M.V., Popov A.V. Implementation of quantitative integral analysis in assessing events associated with safety issues during clinical trials: focusing on trastuzumab. Kachestvennaya Klinicheskaya Praktika = Good Clinical Practice. 2024;(4):21-34. (In Russ.).</mixed-citation></citation-alternatives></ref><ref id="cit3"><label>3</label><citation-alternatives><mixed-citation xml:lang="ru">Саати Т. Принятие решений. Метод анализа иерархий: Пер. с англ. – М.: Радио и связь, 1993. – 320 с.</mixed-citation><mixed-citation xml:lang="en">Saati T. Decision-making. Method of hierarchy Analysis: Translated from English, Moscow: Radio and Communications, 1993, 320 p. (In Russ.).</mixed-citation></citation-alternatives></ref><ref id="cit4"><label>4</label><citation-alternatives><mixed-citation xml:lang="ru">Общий дискриминантный анализ [интернет]. Интеллектуальный Портал Знаний. [доступ 05.03.20255]. Доступ по ссылке: http://statistica.ru/textbook/obshchiy-diskriminantnyy-analiz/</mixed-citation><mixed-citation xml:lang="en">General discriminant analysis Internet. An Intellectual Knowledge Portal. internet. (In Russ.).</mixed-citation></citation-alternatives></ref><ref id="cit5"><label>5</label><citation-alternatives><mixed-citation xml:lang="ru">Решение Совета Евразийской Экономической Комиссии от 3 ноября 2016 года № 79 «Об утверждении Правил надлежащей клинической практики Евразийского экономического союза»</mixed-citation><mixed-citation xml:lang="en">Decision of the Council of the Eurasian Economic Commission of November 3, 2016 No. 79 "On Approval of the Rules of Good Clinical Practice of the Eurasian Economic Union".</mixed-citation></citation-alternatives></ref><ref id="cit6"><label>6</label><citation-alternatives><mixed-citation xml:lang="ru">Национальный стандарт Российской Федерации ГОСТ Р 52379-2005 «Надлежащая клиническая практика»</mixed-citation><mixed-citation xml:lang="en">National Standard of the Russian Federation GOST R 52379-2005 "Good clinical practice".</mixed-citation></citation-alternatives></ref><ref id="cit7"><label>7</label><citation-alternatives><mixed-citation xml:lang="ru">Рекомендациями Коллегии Евразийской экономической комиссии от 17.07.2018 № 11 «О Руководстве по общим вопросам клинических исследований»</mixed-citation><mixed-citation xml:lang="en">Recommendations of the Board of the Eurasian Economic Commission dated 17.07.2018 No. 11 "On Guidelines on general issues of clinical trials".</mixed-citation></citation-alternatives></ref><ref id="cit8"><label>8</label><citation-alternatives><mixed-citation xml:lang="ru">Заде Л.А. Роль мягких вычислений и нечеткой логики в понимании, конструировании и развитии информационных/интеллектуальных систем. Новости искусственного интеллекта. 2001;(2–3):7–11.</mixed-citation><mixed-citation xml:lang="en">Zadeh L.A. The role of soft computing and fuzzy logic in understanding, designing and developing information/intelligent systems. Artificial Intelligence news. 2001;(2– 3):7–11. (In Russ.).</mixed-citation></citation-alternatives></ref><ref id="cit9"><label>9</label><citation-alternatives><mixed-citation xml:lang="ru">Полещук ОМ. Построение интегральных моделей в рамках нечеткой экспертной информации. Лесной вестник. 2003;(5):155–9.</mixed-citation><mixed-citation xml:lang="en">Poleshchuk OM. The construction of integral models within the framework of fuzzy expert information. Forest bulletin. 2003;(5):155–9. (In Russ.).</mixed-citation></citation-alternatives></ref><ref id="cit10"><label>10</label><citation-alternatives><mixed-citation xml:lang="ru">Каган ЕС. Построение комплексных нечетких оценок эффективности деятельности вуза и публичной формализации деятельности преподавателя. Известия Алтайского государственного университета. 2015;(1–1):152–7.</mixed-citation><mixed-citation xml:lang="en">The Kagan of the EU. The construction of complex fuzzy assessments of the effectiveness of the university and the public formalization of the teacher's activities. Proceedings of the Altai State University. 2015;(1–1):152–7. (In Russ.).</mixed-citation></citation-alternatives></ref><ref id="cit11"><label>11</label><citation-alternatives><mixed-citation xml:lang="ru">Адлер ЮП, Маркова ЕВ, Грановский ЮВ. Планирование эксперимента при поиске оптимальных условий. М.: Наука; 1976.</mixed-citation><mixed-citation xml:lang="en">Adler YP, Markova EV, Granovsky SW. Experiment planning in the search for optimal conditions. Moscow: Nauka; 1976. (In Russ.).</mixed-citation></citation-alternatives></ref><ref id="cit12"><label>12</label><citation-alternatives><mixed-citation xml:lang="ru">Макарова ИЛ. Анализ методов определения весовых коэффициентов в интегральном показателе общественного здоровья. Символ науки. 2015;(7–1):87–95.</mixed-citation><mixed-citation xml:lang="en">Makarova IL. Analysis of methods for determining weighting coefficients in the integral indicator of public health. A symbol of science. 2015;(7–1):87–95. (In Russ.).</mixed-citation></citation-alternatives></ref><ref id="cit13"><label>13</label><citation-alternatives><mixed-citation xml:lang="ru">Ушкалова ЕА, Зырянов СК, Гопиенко ИА. Воспроизведенные препараты: соотношение польза/риск. Неврология, нейропсихиатрия, психосоматика. 2021;13(6):98-104. https://doi.org/10.14412/2074-2711-2021-6-98-104</mixed-citation><mixed-citation xml:lang="en">Ushkalova EA, Zyryanov SK, Gopienko IA. Generic drugs: benefit/risk ratio. Nevrologiya, neiropsikhiatriya, psikhosomatika = Neurology, Neuropsychiatry, Psychosomatics. 2021;13(6):98-104. (In Russ.).</mixed-citation></citation-alternatives></ref></ref-list><fn-group><fn fn-type="conflict"><p>The authors declare that there are no conflicts of interest present.</p></fn></fn-group></back></article>
