В соответствии с Соглашением о предоставлении из федерального бюджета грантов в форме субсидий в соответствии с пунктом 4 статьи 78.1 Бюджетного кодекса Российской Федерации № 075-15-2019-1713 от 27.11.2019 г. между Министерством науки и высшего образования Российской Федерации и Федеральным государственным автономным образовательным учреждением высшего образования Первый Московский государственный медицинский университет имени И.М.Сеченова Министерства здравоохранения Российской Федерации (Сеченовский Университет), Институт цифровой медицины Сеченовского Университета выполняет прикладную научно-исследовательскую экспериментальную работу (ПНИЭР) «Разработка системы принятия информированных врачебных решений для выбора рациональной фармакотерапии на основании интеллектуального анализа данных» по лоту шифр № 2019¬05-579-0001 в рамках реализации федеральной целевой программы «Исследования и разработки по приоритетным направлениям развития научно-технологического комплекса России на 2014 — 2020 годы», утвержденной постановлением Правительства Российской Федерации от 21 мая 2013 г. № 426 «О федеральной целевой программе «Исследования и разработки по приоритетным направлениям развития научно-технологического комплекса России на 2014 — 2020 годы». Уникальный идентификатор проекта RFMEFI60819X0278, номер Госрегистрации АААА-А20-120032490131-4 от 24.03.2020 г.
Целью данной работы является создание системы поддержки принятия врачебных решений с интеллектуальным анализом научных данных (текстов стандартов медицинской помощи, клинических рекомендаций, инструкций по применению лекарственных средств, научных публикаций доказательной медицины) для обеспечения возможности принятия врачебных решений в фармакотерапии, учитывающих персонализированные медицинские данные за счет оптимального назначения лекарственных средств и применения медицинских технологий, снижение частоты возникновения нежелательных реакций при одновременном применении 2 и более лекарственных средств по разным показаниям. Технической целью выполнения ПНИЭР является создание интеллектуальной автоматизированной информационной системы поддержки принятия врачебных решений и внедрение ее в клиническую практику.
Перечень ожидаемых научных и научно-технических результатов, подлежащих получению при выполнении ПНИЭР
1. Научно-технические основы для создания нового типа систем поддержки принятия врачебных решений в фармакотерапии, основанные на интеллектуальной обработке данных — стандартов медицинской помощи, клинических рекомендаций, инструкций по применению лекарственных средств, научных публикаций доказательной медицины. (средства гранта)
2. Методы, алгоритмы интеллектуальной обработки данных для системы поддержки принятия врачебных решений в фармакотерапии, основанные на машинном обучении для поиска и представления знаний. (средства гранта)
3. Экспериментальный образец автоматизированной информационной системы (АИС) поддержки принятия врачебных решений в фармакотерапии с WEB-интерфейсом (за счет средств гранта) и мобильными приложениями для устройств c операционными системами класса Android и iOS (внебюджетное финансирование).
4. Контент для наполнения баз данных и знаний (внебюджетное финансирование), и непосредственно базы данных и знаний в составе создаваемой АИС (средства гранта):
• с формализованными нормативными данными, определяющими порядок применения фармакотерапевтических методов, стандарты медицинской помощи, клинические рекомендации доказательной медицины;
• с инструкциями по применению лекарственных средств, включая соответствие лекарственных средств диагнозам, полу и возрасту пациентов, противопоказания к применению, сведения о несовместимости лекарственных средств, сведения о комплексности применения нескольких препаратов;
• с формализованными данными научных публикаций доказательной медицины, сведениями об оценке лекарственных средств и результатами расчета показателей их эффективности.
5. Техническая (средства гранта) и эксплуатационная (внебюджетные средства) документация по требованиям ГОСТ 34.201-89.
6. Результаты клинической апробации разработанной системы поддержки принятия врачебных решений. (внебюджетное финансирование)
Требования к выполняемым работам
В обеспечение выполнения стоящих перед проектом задач поэтапно должны быть проведены следующие работы:
1. Должны быть выполнены обоснование и выбор направления научных исследований с целью определения оптимального варианта построения системы поддержки принятия врачебных решений на основе анализа состояния исследуемой проблемы, включающие:
• выполнение аналитического обзора современной научно-технической, нормативной, методической литературы, затрагивающие научно-техническую проблематику создания систем поддержки принятия врачебных решений, исследуемую в рамках проекта;
• проведение патентных исследований в соответствии ГОСТ Р 15.011-96 «Система разработки и постановки продукции на производство. Патентные исследования. Содержание и порядок проведения».
(за счет средств гранта)
2. Должно быть проведено теоретические исследования и разработка математического аппарата, методов и алгоритмов интеллектуальной обработки данных для систем поддержки принятия врачебных решений в фармакотерапии, основанные на машинном обучении для поиска, извлечения и представления знаний. (за счет средств гранта)
3. По результатам исследований должно быть выполнено техническое проектирование системы, оформлена техническая документация отражающая реализованные конструкторские, программные и технологические решения. Для реализации этапа по созданию АИС в соответствии с требованиями ГОСТ 34.602-89 должно быть разработано Техническое задание (ТЗ) на создание “Системы поддержки принятия врачебных решений для выбора рациональной фармакотерапии на основании интеллектуального анализа данных”. (за счет средств гранта)
4. Должен быть разработан экспериментальный образец АИС, соответствующий требованиям ТЗ, web-интерфейсы — для работы с системой (за счет средств гранта) и мобильные приложения (внебюджетное финансирование).
Для обеспечения работы АИС должен быть разработан и подготовлен контент для наполнения баз данных и знаний (внебюджетные источники) и в составе АИС созданы специализированные базы данных и знаний (за счет средств гранта):
• с формализованными нормативными данными, определяющими порядок применения фармакотерапевтических методов, стандарты медицинской помощи, клинические рекомендации доказательной медицины по направлениям — кардиология, гастроэнтерология, педиатрия, эндокринология, нейрохирургия, гематология, акушерство и гинекология, дерматология, урология, онкология, отоларингология, неврология, пульмонология, инфекционные болезни, общая хирургия, анестезиология, нефрология, ортопедия. Состав и содержание баз данных может уточняться на этапе теоретических исследований и проектирования системы;
• с инструкциями по применению лекарственных средств, включая соответствие лекарственных средств диагнозам, полу и возрасту пациентов, противопоказания к применению, сведения о несовместимости лекарственных средств, сведения о комплексности применения нескольких препаратов;
• с формализованными данными научных публикаций доказательной медицины, сведениями об оценке лекарственных средств и результатами расчета показателей их эффективности.
5. Должны быть проведены испытания разработанной АИС и опытная эксплуатация. Требования к ним должны быть определены в ТЗ на создание АИС. (за счет средств гранта)
6. Должна быть проведена клиническая апробация созданной АИС в клинических больницах Первого Московского Государственного Медицинского Университета им. Сеченова (далее Сеченовский университет) (внебюджетное финансирование)
7. По результатам опытной эксплуатации и клинической апробации системы должны быть проведены обобщение результатов реализации проекта, оценка соответствия требованиям ТЗ и оценка полноты решения задач и достижения целей ПНИЭР эффективности результатов. (за счет средств гранта) Должна быть разработана эксплуатационная документация на АИС и мобильные приложения к ней. (внебюджетное финансирование)
8. Должны быть разработаны и подготовлены предложения по реализации результатов проекта, их возможной коммерциализации и вовлечению в хозяйственный оборот. (внебюджетное финансирование)
9. Должна быть проведена оценка результатов реализации проекта на соответствие требованиям ТЗ и оценка эффективности клинического применения АИС (внебюджетное финансирование)
Технические требования
Требования по назначению научно-технических результатов ПНИЭР
1. Аналитические исследования текущего состояния предметной области, трендов, технологических решений применяемых в современных системах поддержки принятия решений предназначены для выработки научно-технических основ создания нового типа систем поддержки принятия врачебных решений в фармакотерапии, основанных на многосторонней и комплексной интеллектуальной обработке больших данных неструктурированной биомедицинской текстовой информации — стандартов медицинской помощи, клинических рекомендаций, инструкций по применению лекарственных средств, научных публикаций доказательной медицины.
2. Разрабатываемые методы и алгоритмы интеллектуальной обработки данных для системы поддержки принятия врачебных решений в фармакотерапии предназначены для практической реализации и создания прикладного программного обеспечения с элементами искусственного интеллекта, обеспечивающего эффективный поиск и извлечение из неструктурированного медицинского контента фактов, знаний, выделения именованных сущностей (органы, симптомы и нозологии, лекарственные препараты и химические соединения), построения семантических сетей медицинских знаний.
3. Разрабатываемая автоматизированная информационная система и мобильные приложениями к ней предназначены для применения в клинической практике врачами-специалистами (по направлениям: кардиология, гастроэнтерология, педиатрия, эндокринология, нейрохирургия, гематология, акушерство и гинекология, дерматология, урология, онкология, отоларингология, неврология, пульмонология, инфекционные болезни, общая хирургия, анестезиология, нефрология, ортопедия), как система обеспечивающая поддержку принятия врачебных решений в фармакотерапии и базирующаяся на знаниях доказательной медицины.
4. Разрабатываемые базы данных и знаний предназначены для информационного обеспечения создаваемой АИС:
• с формализованными нормативными данными, определяющими порядок применения фармакотерапевтических методов, стандарты медицинской помощи, клинические рекомендации доказательной медицины;
• с инструкциями по применению лекарственных средств;
• с формализованными данными научных публикаций доказательной медицины, сведениями об оценке лекарственных средств и результатами расчета показателей их эффективности
5. Размещение создаваемой АИС в сети Интернет, web-интерфейсы к ней, регистрация мобильных приложений для работы с системой в хранилищах AppStore, GooglePay предназначены для практической клинической отработки врачами специалистами клинических центров Сеченовского Университета.
6. Разработка технической и эксплуатационной документация на АИС по требованиям ГОСТ 34.201-89 предназначена для использования в клинической апробации системами персоналом клинических центров Сеченовского университета.
7. Клиническая апробация разработанной системы поддержки принятия врачебных решений предназначена для оценки эффективности ее реализации и обобщения результатов проекта.
Требования к показателям назначения, техническим характеристикам научно-технических результатов ПНИЭР
Требования к разрабатываемым методам и алгоритмам интеллектуальной обработки биомедицинских текстов.
1. Разрабатываемые методы и алгоритмы должны удовлетворять требованиям полноты, адекватности, обеспечивать возможность использования как отечественных, так и зарубежных баз данных и знаний:
• клинические рекомендации доказательной медицины Сеченовского университета ;
• цифровой архив биомедицинской литературы PubMed (обрабатывать не менее > 30 млн. документов);
• цифровой архив полнотекстовой биомедицинской и журнальной литературы, включая клиническую медицину PMC (обрабатывать не менее >7 млн. документов);
• реестр лекарственных средств и препаратов, зарегистрированных на территории РФ (ГРЛС);
• фармакологическая, реферируемая база знаний DrugBank.ca;
• фармакогеномной базы знаний о влиянии генетических вариаций на лекарственные реакции PharmGKB;
• база стандартизированных названий клинических лекарств RxNORM.
2. Разрабатываемые методы и алгоритмы должны обеспечивать возможность работы с классификаторами и словарями MeSH, SNOMED-CT.
3. Разрабатываемые методы должны обеспечивать:
• расшифровку медицинских аббревиатур и сокращений;
• выделение концептов, обозначающих заболевания, патологии, вмешательства, медицинские препараты, обследования;
• выявление семантических связей между этими концептами, а также определение атрибутов этих концептов.
4. Методы и алгоритмы должны допускать варьирование не менее 90% от общего числа переменных.
5. Алгоритмы машинного обучения и интеллектуальной обработки данных должны удовлетворять требованиям и условиям, ограничивающим время решения задачи не более 1 часа. При исследовании в реальном масштабе времени допустимое время решения определяется требованиями регламента обслуживания пациента и не может превышать 10 минут.
6. Разрабатываемые методы должны быть алгоритмизированы для последующей реализации с помощью существующих компьютерных средств и современных информационных технологий, должны быть физически осуществимы на исследовательском оборудовании Университета
7. Алгоритмы интеллектуального поиска клинических доказательств должны обеспечивать получение полезной информации об объекте в плане поставленной задачи исследования. Информация, полученная с помощью реализованных методов, должна обеспечивать диагностику, расчет значений параметров заболеваний и показателей эффективного применения фармакологических средств, позволять определять пути их наиболее эффективного применения.
8. Алгоритмы машинного обучения должны обеспечивать качество поисковой выдачи по показателям релевантности и метрикам nDCG и RBP
9. Методы и алгоритмы машинного обучения должны обладать свойством робастности и устойчивости по отношению к погрешностям и ошибкам в исходных данных до 5%.
Требования к разрабатываемой автоматизированной информационной системе
1. Разрабатываемая АИС должна обеспечивать возможность высоконагруженной одновременной работы не менее 1000 пользователей при следующих временных характеристиках:
• для операций навигации по экранным формам АИС (за исключением выдачи поисковых запросов, в т.ч. построения фильтрованных списков) — не более 5 секунд;
• для операций поиска информации в АИС — не более 10 секунд;
• для операций формирования документов по шаблонам — не более 20 секунд.
2. Время формирования ответов на запросы пользователей определяется их сложностью и объемами обрабатываемых данных. АИС должна обеспечивать указанные показатели при размере базы данных до 10Тб.
3. Работоспособность АИС не должна нарушаться при превышении указанной нагрузки, при этом допускается пропорциональное изменение временных характеристик.
4. АИС должна обеспечить настройку и адаптацию к структурным изменениям представления знаний доказательной медицины по специальностям — введение новых, объединение существующих, исключение из классификаторов.
5. АИС должна функционировать в следующих режимах:
• штатный режим, при котором обеспечивается выполнение задач в объеме функций, предусмотренных настоящим техническим заданием;
• сервисный режим, необходимый для проведения обслуживания, реконфигурации и пополнения технических и программных средств АИС новыми компонентами;
• аварийный режим работы.
6. В штатном режиме функционирования АИС должна обеспечивать доступность функций системы в режиме — 24 часа в день, 7 дней в неделю (24х7).
7. Круглосуточный режим работы АИС не должен требовать организации круглосуточной работы пользователей и допускает работу пользователей в соответствии со штатным расписанием.
8. В сервисном режиме АИС должна обеспечивать возможность проведения следующих работ:
• техническое обслуживание;
• адаптацию аппаратно-программного комплекса;
• устранение аварийных ситуаций.
9. Последовательность действий и содержание работ должны быть определены в эксплуатационной документации на систему.
10. Регламентные работы должны производиться с учётом требований о доступности АИС.
11. Функционирование АИС при отказах и сбоях серверного общесистемного и специального программного обеспечения и оборудования, в том числе структурных узлов АИС, не предусматривается.
Требования к объектам экспериментальных ПНИЭР
1. Экспериментальный образец АИС должен представлять собой единый комплекс программных продуктов с интерфейсом на русском языке, предназначенных для выполнения задачи автоматизации процессов поддержки принятия врачебных решений.
2. Экспериментальный образец АИС должен состоять:
• подсистемы хранения баз данных и знаний;
• подсистемы обработки поисковых запросов и выдачи клинических рекомендаций по рациональному применению фармакотерапевтических средств;
• подсистемы машинного обучения для формирования баз знаний доказательной медицины;
• подсистемы предоставления доступа со стороны мобильных устройств;
• комплекса программно-технических средств.
3. Экспериментальный образец АИС должен обеспечивать возможность развертывания на технических платформах удаленных дата-центров.
4. Экспериментальный образец АИС должен иметь централизованную базу данных с предоставлением защищенного доступа для пользователей. Централизованная база данных должна обеспечивать:
• автоматический экспорта-импорта данных (работа с единой базой данных);
• возможность постоянного (online) доступа к системе и всей текущей информации (без привязки к стационарному рабочему месту пользователя);
• вести единые справочники, классификаторы и иные формализованные документы, обеспечить централизованный контроль наполнения документов системы.
5. Экспериментальный образец АИС должен предоставлять возможность работы в режиме тонкого клиента (работа пользователя осуществляется через web-браузер), функционирующего в различных операционных средах — Microsoft Windows, Unix (Linux). Список поддерживаемых web-браузеров должен включать Microsoft Internet Explorer, Mozilla Firefox, Google Chrome, Apple Safari.
6. Экспериментальный образец АИС должен быть организован по принципу трехзвенной архитектуры: клиентское приложение, в качестве которого должен выступать Web- браузер, сервер приложений (Web-сервер) и сервер базы данных.
7. Штатные средства экспериментального образца АИС должны позволять проводить удаленное администрирование базы данных и настройку прикладного программного обеспечения АИС.
8. В качестве технической платформы для функционирования модели машинного обучения экспериментального образца Системы должны использоваться мощности Института цифровой медицины Сеченовского университета. В ходе технического проектирования должны быть разработаны:
• функциональные схемы взаимодействия моделей машинного обучения с компонентами технической архитектуры системы между собой и с внешними системами;
• требования к необходимой вычислительной мощности виртуальных серверов распределенной обработки данных для машинного обучения штатного образца системы;
• требований к необходимым вычислительным мощностям и объемам дисковых пространств для хранения данных.
Требования к патентным исследованиям и регистрации результатов интеллектуальной деятельности
1. На первом этапе выполнения проекта должны быть проведены патентные исследования в соответствии ГОСТ Р 15.011-96.
2. На остальных этапах проекта при получении результатов интеллектуальной деятельности (далее — РИД), способных к правовой охране (в соответствии со ст. 1225 ГК РФ), должны быть проведены дополнительные патентные исследования в соответствии с ГОСТ Р 15.011-96.
3. Должны быть представлены сведения об охранных и иных документах, которые будут препятствовать применению результатов работ в Российской Федерации и в других странах, и условия их использования с представлением соответствующих обоснованных предложений и расчетов.
4. При получении результатов интеллектуальной деятельности, способных к правовой охране, они должны быть зарегистрированы в соответствии с законодательством РФ.
5. Все результаты, а также сведения об их использовании подлежат государственному учету в Единой государственной информационной системе учета научно-исследовательских, опытно¬конструкторских и технологических работ гражданского назначения в соответствии с правилами, установленными Правительством Российской Федерации
Работа выполняется в два этапа. На первом этапе (с 27.11.2019 по 31.12.2019 гг) должны быть выполнены следующие работы:
Работы Получателя за счет средств гранта
1.1. Обоснование и выбор направления научных исследований с целью определения оптимального варианта построения системы поддержки принятия врачебных решений на основе анализа состояния исследуемой проблемы, включающие:
• выполнение аналитического обзора современной научно-технической, нормативной, методической литературы, затрагивающие научно¬техническую проблематику создания систем поддержки принятия врачебных решений, исследуемую в рамках проекта;
• проведение патентных исследований в соответствии ГОСТ Р 15.011 -96 «Система разработки и постановки продукции на производство.
Патентные исследования. Содержание и порядок проведения».
1.2. Теоретические исследования и разработка математического аппарата, методов и алгоритмов интеллектуальной обработки данных для систем поддержки принятия врачебных решений в фармакотерапии, основанные на машинном обучении для поиска, извлечения и представления знаний.
1.3. Техническое проектирование системы, оформление технической документации, отражающая реализованные конструкторские, программные и технологические решения.
1.4. Разработка Техническое задание (ТЗ) на создание АИС — “Системы поддержки принятия врачебных решений для выбора рациональной фармакотерапии на основании интеллектуального анализа данных”.
1.5. Разработка программного обеспечения для ведения специализированной базы данных и знаний АИС и WEB-интерфейсов для работы с системой, с формализованными нормативными данными, определяющими порядок применения фармакотерапевтических методов, стандарты медицинской помощи, клинические рекомендации доказательной медицины по направлениям — кардиология, гастроэнтерология, педиатрия, эндокринология, нейрохирургия, гематология, акушерство и гинекология, дерматология, урология, онкология, отоларингология, неврология, пульмонология, инфекционные болезни, общая хирургия, анестезиология, нефрология, ортопедия.
Работы Получателя, выполняемые за счет собственных средств из внебюджетных источников
1.6 Разработка контента (для информационного наполнения БД АИС) клиническими рекомендациями доказательной медицины по направлениям — кардиология, гастроэнтерология, педиатрия, эндокринология, нейрохирургия, гематология, акушерство и гинекология, дерматология, урология, онкология, отоларингология, неврология, пульмонология, инфекционные болезни, общая хирургия, анестезиология, нефрология, ортопедия.
Работы Получателя, выполняемые за счет средств Индустриального партнера
1.7 Разработка контента (для информационного наполнения БД АИС) стандартами медицинской помощи и нормативными документами определяющими порядок применения фармакотерапевтических методов
Работы Индустриального партнера, выполняемые за счет собственных средств из внебюджетных источников
1.8 Разработка прототипа мобильного приложения для работы со стандартами медицинской помощи, нормативными документами определяющими порядок применения фармакотерапевтических методов и клиническими рекомендациями доказательной медицины по направлениям — кардиология, гастроэнтерология, педиатрия, эндокринология, нейрохирургия, гематология, акушерство и гинекология, дерматология, урология, онкология, отоларингология, неврология, пульмонология, инфекционные болезни, общая хирургия, анестезиология, нефрология, ортопедия.
При выполнении Этапа 1 ПНИЭР выполнены следующие работы:
Работы Получателя за счет средств гранта: «1.1 Обоснование и выбор направления научных исследований с целью определения оптимального варианта построения системы поддержки принятия врачебных решений на основе анализа состояния исследуемой проблемы, включающие:
• выполнение аналитического обзора современной научно-технической, нормативной, методической литературы, затрагивающие научно-техническую проблематику создания систем поддержки принятия врачебных решений, исследуемую в рамках проекта (отражено в 1 разделе отчета);
• проведение патентных исследований в соответствии ГОСТ Р 15.011 -96 «Система разработки и постановки продукции на производство. Патентные исследования. Содержание и порядок проведения» (отражено в отдельном документе).
В результате анализа по базам данных биомедицинских публикаций современные Информационные системы поддержки принятия клинических решений (CDSS) можно классифицировать по следующим видам назначения и практического применения:
1. Управление рабочими процессами больницы (МИС): регистрация пациентов, электронные карты, управления оповещениями по долгосрочному уходу, управление событиями (прием пациента, повторная консультация и т.п.), электронное назначение лекарств, выставление счетов, встроенные платежи для пациентов.
2. Скрининг и диагностика.
Системы диагностики на основе технологий визуализации. Комплексные интеллектуальные решения для обработки медицинских изображений (рентгеногрфия, томография, др.)
3. Решения по отдельным специальностям – инфекционные болезни, лучевая терапия, нефрология, диабет, ортопедия, онкология, урология, др.
4. Системы, ориентированные на поддержку клинических исследований (испытаний фарм. препаратов)
5. Поддержка решений на основе алгоритмов, калькуляторы, медицинский сервис.
6. Интерпретация лабораторных диагностических тестов.
7. Уход на дому за пациентами с алгоритмами ухода:
— после выписки (инсульт, операция на сердце, др.);
— хронические заболевания (диабет, сердечная недостаточность);
— библиотека описаний заболеваний для пациентов.
8. Системы вовлечения пациентов в управление своим здоровьем
9. Базы клинических руководств для использования в местах оказания помощи (UpToDate, Dynamed, Micrimedex):
— клинические руководства по лечению;
— диагностический инструмент.
10. Интегрируемые базы лекарственных средств. Лекарственные информационные продукты – инструкции, взаимодействия, риски, др.
11. Справочник по лексике для поиска медицинской информации в Интернете. База медицинской терминологии, медицинского языка.
12. Приложения для домашнего телемониторинга для пациентов с хроническими заболеваниями.
13. Порталы связи пациента с врачом
14. Системы для отделений неотложной/скорой помощи
15. Носимые устройства для пациентов + Приложения экстренного реагирования
16. Информационные ресурсы для медсестер: информация о лекарствах, калькуляторы дозировки лекарств, информационный материал для пациентов
17. Системы управления хирургическими ситуациями
18. Интегрированные системы, объединяющие клинические руководства с электронными медицинскими картами
20. Выработка персонализированных рекомендаций, основанных на доказательной базе.
В рамках такой классификации разрабатываемая система относится к классу баз данных клинических руководств для использования в местах оказания помощи:
— клинические руководства по лечению;
— клинические диагностический руководства.
Помимо создания такой базы данных клинических руководств, потребуется создание специализированного программного обеспечения для формирования систематических обзоров по произвольным медицинским направлениям и проблематике. Эту задачу предполагается решать посредством создания многоязычной вероятностной тематической модели на коллекции изучаемых документов, одновременно учитывающая n-язычный словарь (по количеству видов языков, представленных в отобранной коллекции документов) и онтологических связей между документами сравнимых коллекции. Нормализацию терминов в коллекции многоязычных документов предполагается проводить с использованием тезаурусов медицинских терминов MeSH для каждого языка представления документов. Ввиду того, что текущая версия MeSH обеспечивает синхронизацию используемых терминов более чем на 48 языках, для покрытия всей многоязычной коллекции документов, такой выбор можно считать вполне обоснованным. Дополнительные классификационные признаки для тематического рубрицирования документов по персонализированной медицине предполагается получать из открытых источников биомедицинских онтологий.
Для комбинирования различных видов классификационных признаков предполагается применять аддитивную регуляризация создаваемой тематической модели. Предполагается провести исследование значимости различных регуляризационных признаков на качество модели (автор, место исследования, компания, информационный источник, … и проч.). Их конечное множество будет определено на последнем этапе исследования.
Предварительная обработка документов в коллекциях является одним из ключевых компонентов разрабатываемого метода и предполагает последовательное решение задач токенизации контента, фильтрации и очистки от стоп-слов, лематизации очищенной выборки и стеминга. Далее кратко опишем их.
Выбор правильной стратегии токенизации является нетривиальной задачей, особенно в биомедицинской области. Большинство исследуемых документов представлены на английском языке. Токенизация англоязычных биомедицинских текстов особенно трудна из-за того, что традиционный английский отличается от биомедицинского, как синтаксическим содержанием, так и грамматикой. Для эффективной токенизации документов предполагается использовать словари клинических терминов из систематизированной медицинской номенклатуры, генные символы, названия белков и лекарств. Устойчивые сочетания терминов также предполагается заменять на отдельные токены.
Для эффективного интеллектуального анализа текста в конвейер токенизации предполагается включить множества доступных нам ресурсов знаний. В области доказательной медицины, в отличие от общей области интеллектуального анализа текста, мы имеем хорошо отлаженные онтологии и базы знаний. Биомедицинские онтологии обеспечивают однозначную характеристику данной области знаний. Качество моделей, вероятно, возрастет, если существующие онтологии (UMLS, BioPortal, Protein, DrugNRX) будут использоваться в качестве источников терминов при токенизации, выяснения того, как концепт относится к именованной сущности из справочника, а также в качестве способа нормализации альтернативных имен и их приведению к одному идентификатору.
Фильтрацию предполагается использовать для удаления из документов слов, не несущих смыслового содержания. Помимо традиционного удаление стоп-слов (предлоги, союзы и т. д.). предполагается очистить документы от терминов, не относящихся к доказательной медицине. Для этого на основании имеющегося в Центре доказательной медицины 1МГМУ им.Сеченова корпуса документов предполагается провести частотно-статистический анализ используемых слов и применить его для последующей фильтрации. Так как слова, встречающиеся в текстах, довольно часто содержат небольшую информацию для разделения документов, а редко встречающиеся слова не имеют существенного значения, то и те и другие будут удаляться из документов.
На следующем этапе предполагается проводить лемматизацию документов, а именно осуществлять морфологический анализ слов, группируя их различные формы в одну. Лемматизация приведет различные формы слов к базовым видам (глагол – инфинитив, существительные – единственное число, именительный падеж, и т.д.). Для англоязычных текстов лемматизацию предполагается проводить, используя методы стемминга (Stemming metod), которые направлены на получение основы (корня) производных слов.
Таким образом в рамках заявленной проблематики исследований потребуется решение следующей группы задач:
— Разработка методики и формирование мультиязычного реестра источников информации для прогнозирования трендов и перспектив развития доказательной медицины;
— Разработка технологии парсинга информационных источников и формирования датасетов анализируемых документов;
— Разработка методов предобработки коллекций документов, нормализации данных с использованием биомедицинских тезаурусов и онтологий с учетом специфики персонализированной медицины;
— Разработка методов динамического мультиязычного тематического моделирования коллекций документов персонализированной медицины;
— Проведение машинного обучения (machine learning) разработанной мультиязычной тематической модели на коллекции документов персонализированной медицины и оценка качества машинного обучения на известных метриках;
— Разработка методов визуального представления результатов тематического моделирования с учетом специфики персонализированной медицины.
Помимо разработки перечисленных выше методик предполагается разработать соответствующее программное обеспечение и провести его апробацию в клиниках персонализированной медицины Сеченовского университета для последующего формирования наборов клинических рекомендаций по отдельным направлениям доказательной медицины в разрабатываемом проекте системы клинических рекомендаций доказательной медицины www.datamed.pro.
Проведено полное и адекватное патентное исследование в соответствии ГОСТ Р 15.011 -96 «Система разработки и постановки продукции на производство. Патентные исследования. Содержание и порядок проведения» (отражено в отдельном документе).
Анализируя оценки выполнения работы, приведенные в 1 разделе, можно констатировать, что полученные результаты, выполненной работы «1.1 Обоснование и выбор направления научных исследований …» соответствуют требованиям Технического задания (Приложение № 1 к Соглашению), содержание отчетных материалов показывают, что поставленные задачи на отчетном этапе выполнены полностью.
Работы Получателя за счет средств гранта: «1.2 Теоретические исследования и разработка математического аппарата, методов и алгоритмов интеллектуальной обработки данных для систем поддержки принятия врачебных решений в фармакотерапии, основанные на машинном обучении для поиска, извлечения и представления знаний» (отражено во 2 разделе отчета).
Результатами выполнения данной работы являются следующие.
1. Проведен анализ подходов к построению интеллектуальных систем поддержки принятия врачебных решений.
2. Разработан математический аппарат интеллектуальной обработки данных для систем поддержки принятия врачебных решений в фармакотерапии, основанные на машинном обучении для поиска, извлечения и представления знаний, который состоит из трех основных частей, разработанных в настоящем научном исследовании:
• Метод построения логических зависимостей на основании обработки больших массивов данных (подраздел 2.2);
• Аппликативно-фреймовая модель представления знаний в задачах поддержки принятия врачебных решений, построенная на основе реализации компонентов машины потоков данных в нотации теории комбинаторов Карри, расширенной до многомерных комбинаторов, являющейся безтиповой производной от ƛ –исчисления Черча, где впервые осуществлен вывод представления многомерных комбинаторов в нотации базисного набора комбинаторов (раздел 2.3);
• Метод вывода решений в аппликативно-фреймовой модели представления знаний на основе обработки нечетких множеств средствами дифференциальных уравнений с применением принципа минимума Понтрягина. В методе сделано описание динамики сложных процессов принятия врачебных решений системой дифференциальных уравнений вектора исходных данных о состоянии здоровья. При этом учитывается влияние случайных возмущающих факторов реальной среды (Раздел 2.4).
Таким образом, во 2 разделе отчете представлены все этапы и подходы управления знаниями в интеллектуальной системе: формирование правил вывода решений на больших объемах данных, модель представления знаний и метод вывода решений в этой модели.
Опубликована статья:
Г.С. Лебедев, Э.Н. Фартушный, И.А. Шадеркин, Г.С. Клименко, И.В. Рябков, П.Б. Кожин, К.А. Кошечкин, Г.П. Радзиевский, И.В. Фомина. Создание информационной системы поддержки принятия врачебных решений на основе методов доказательной медицины // Журнал телемедицины и электронного здравоохранения. –2019, № 1-2, URL: http://jtelemed.ru/journal/vypusk-1-2-2019
Анализируя оценки выполнения работы, приведенные во 2 разделе, можно констатировать, что полученные результаты, выполненной работы «1.2 Теоретические исследования …» соответствуют требованиям Технического задания (Приложение № 1 к Соглашению), содержание отчетных материалов показывают, что поставленные задачи на отчетном этапе выполнены полностью.
Работы Получателя за счет средств гранта: «1.3 Техническое проектирование системы, оформление технической документации, отражающая реализованные конструкторские, программные и технологические решения» (отражено в 3 разделе отчета).
Разработанный документ: «Пояснительная записка к технорабочему проекту» подтверждает научную значимость и прикладную перспективность проведенных теоретических исследований.
Анализируя оценки выполнения работы, приведенные в 3 разделе, можно констатировать, что полученные результаты, выполненной работы «1.3 Техническое проектирование …» соответствуют требованиям Технического задания (Приложение № 1 к Соглашению), содержание отчетных материалов показывают, что поставленные задачи на отчетном этапе выполнены полностью.
Работы Получателя за счет средств гранта: «1.4 Разработка Технического задания (ТЗ) на создание АИС — “Системы поддержки принятия врачебных решений для выбора рациональной фармакотерапии на основании интеллектуального анализа данных» (отражено в 4 разделе отчета).
Разработанный документ: «Техническое задание на создание автоматизированной информационной системы поддержки принятия врачебных решений для выбора рациональной фармакотерапии на основании интеллектуального анализа данных» подтверждает научную значимость и прикладную перспективность проведенных теоретических исследований.
Анализируя оценки выполнения работы, приведенные в 4 разделе, можно констатировать, что полученные результаты, выполненной работы «1.4 Разработка Технического задания (ТЗ) на создание АИС …» соответствуют требованиям Технического задания (Приложение № 1 к Соглашению), содержание отчетных материалов показывают, что поставленные задачи на отчетном этапе выполнены полностью.
Работы Получателя за счет средств гранта: «1.5 Разработка программного обеспечения для ведения специализированной базы данных и знаний АИС и WEB-интерфейсов для работы с системой, с формализованными нормативными данными, определяющими порядок применения фармакотерапевтических методов, стандарты медицинской помощи, клинические рекомендации доказательной медицины по направлениям — кардиология, гастроэнтерология, педиатрия, эндокринология, нейрохирургия, гематология, акушерство и гинекология, дерматология, урология, онкология, отоларингология, неврология, пульмонология, инфекционные болезни, общая хирургия, анестезиология, нефрология, ортопедия» (отражено в 5 разделе отчета).
Разработанный документ: «Описание программного обеспечения» и архив программного обеспечения public_html.tar.gz подтверждает научную значимость и прикладную перспективность проведенных теоретических исследований.
Анализируя оценки выполнения работы, приведенные в 5 разделе, можно констатировать, что полученные результаты, выполненной работы «1.5 Разработка программного обеспечения для ведения специализированной базы данных и знаний …» соответствуют требованиям Технического задания (Приложение № 1 к Соглашению), содержание отчетных материалов показывают, что поставленные задачи на отчетном этапе выполнены полностью.
Работа выполнена в составе первого этапа ПНИЭР: «Теоретические исследования задач и проектирование “Системы поддержки принятия врачебных решений для выбора рациональной фармакотерапи и на основании интеллектуальн ого анализа данных”», работы Получателя, выполняемой за счет собственных средств из внебюджетных источников: «1.6 Разработка контента (для информационного наполнения БД АИС) клиническими рекомендациями доказательной медицины по направлениям — кардиология, гастроэнтерология, педиатрия, эндокринология, нейрохирургия, гематология, акушерство и гинекология, дерматология, урология, онкология, отоларингология, неврология, пульмонология, инфекционные болезни, общая хирургия, анестезиология, нефрология, ортопедия» (отражено в 6 разделе отчета)
Разработанный документ: «Контент для информационного наполнения БД АИС клиническими рекомендациями доказательной медицины по направлениям» подтверждает научную значимость и прикладную перспективность проведенных теоретических исследований.
Анализируя оценки выполнения работы, приведенные в 6 разделе, можно констатировать, что полученные результаты, выполненной работы «1.6 Разработка контента (для информационного наполнения БД АИС) клиническими рекомендациями …» соответствуют требованиям Технического задания (Приложение № 1 к Соглашению), содержание отчетных материалов показывают, что поставленные задачи на отчетном этапе выполнены полностью.
Работа выполнена в составе первого этапа ПНИЭР: «Теоретические исследования задач и проектирование “Системы поддержки принятия врачебных решений для выбора рациональной фармакотерапи и на основании интеллектуального анализа данных”», работы Получателя, выполняемой за счет средств Индустриального партнера и работы Индустриального партнера, выполняемые за счет собственных средств из внебюджетных источников: «1.7 Разработка контента (для информационного наполнения БД АИС) стандартами медицинской помощи и нормативными документами» (отражено в 7 разделе отчета).
Разработанные документы подтверждает научную значимость и прикладную перспективность проведенных теоретических исследований.
Обобщая оценки выполнения работы, приведенные в 7 разделе, можно констатировать, что полученные результаты соответствуют требованиям Технического задания (Приложение № 1 к Соглашению), содержание отчетных материалов показывают, что поставленные задачи на отчетном этапе выполнены полностью.
Работа выполнена в составе первого этапа ПНИЭР: «Теоретические исследования задач и проектирование “Системы поддержки принятия врачебных решений для выбора рациональной фармакотерапи и на основании интеллектуального анализа данных”», работы Индустриального партнера, выполняемой за счет собственных средств из внебюджетных источников: «1.8 Разработка прототипа мобильного приложения для работы со стандартами медицинской помощи, нормативными документами определяющими порядок применения фармакотерапевтических методов и клиническими рекомендациями доказательной медицины по направлениям — кардиология, гастроэнтерология, педиатрия, эндокринология, нейрохирургия, гематология, акушерство и гинекология, дерматология, урология, онкология, отоларингология, неврология, пульмонология, инфекционные болезни, общая хирургия, анестезиология, нефрология, ортопедия» (отражено в 8 разделе отчета).
Разработанный документ: «Описание программного обеспечения» подтверждают научную значимость и прикладную перспективность проведенных теоретических исследований.
Анализируя оценки выполнения частей работы, приведенные в 8 разделе, можно констатировать, что полученные результаты соответствуют требованиям Технического задания (Приложение № 1 к Соглашению), содержание отчетных материалов показывают, что поставленные задачи на отчетном этапе выполнены полностью.
Суммируя оценки выполнения работы, приведенные в предыдущих разделах и обобщая оценки выполнения всех (8) разделов отчета, ассоциированных с задачами этапа можно констатировать, что полученные результаты соответствую требованиям Технического задания (Приложение № 1 к Соглашению), содержание отчетных материалов показывают, что поставленные задачи на отчетном этапе выполнены полностью.
ПРИ ВЫПОЛНЕНИИ ЭТАПА 2 ПНИЭР ВЫПОЛНЕНЫ СЛЕДУЮЩИЕ РАБОТЫ
РАЗРАБОТКА АИС, В СООТВЕТСТВИИ С ТРЕБОВАНИЯМИ ТЗ. ПРОЕКТИРОВАНИЕ И РАЗРАБОТКА СПЕЦИАЛИЗИРОВАННЫХ БАЗ ДАННЫХ И ЗНАНИЙ (ПОДРАЗДЕЛЫ 2.1. ПГ, 2.5, 3.4, 4.2.2 ТЗ)
Разработка АИС, в соответствии с требованиями ТЗ. Проектирование и разработка специализированных баз данных и знаний:
• с инструкциями по применению лекарственных средств, включая соответствие лекарственных средств диагнозам, полу и возрасту пациентов, противопоказания к применению, сведения о несовместимости лекарственных средств, сведения о комплексности применения нескольких препаратов;
• с формализованными данными научных публикаций доказательной медицины, сведениями об оценке лекарственных средств и результатами расчета показателей их эффективности.
Программная документация в соответствии с требованиями ТЗ приведена в виде отельнойгруппы документов:
• Техническое задание на создание АИС;
• Руководство пользователя АИС;
• Описание базы данных клинических рекомендаций Сеченовского университета;
• Пояснительная записка к технорабочему проекту АИС.
Эксплуатационная документация в соответствии с требованиями ТЗ приведена в виде отельной группы документов:
• Руководство по эксплуатации АИС.
В виде отдельноых документов приведенытексты программ:
• Текст программы «Автоматизированная информационная система принятия информированных врачебных решений для выбора рациональной фармакотерапии на основании интеллектуального анализа данных»;
• Текст программы «Информационная система интеллектуальной обработки биомедицинских текстов».
Значительная часть аспектов, отраженных в них рассматривается в других разделах настоящего отчета.
Суммируя оценки выполнения работы, приведенные в подразделах настоящего раздел, можно констатировать, что полученные результаты соответствую требованиям Календарного плана (п.2.1.) и Технического задания (Приложение № 1 к Соглашению – подразделы 2.5, 3.4, 4.2.2).
Ссодержание отчетных материалов:
— соответствует выбранным способам и методам исследований научно-техническим задачам, поставленным перед проектом;
— соответствует используемым инструментам исследований, современному уровню науки;
— подтверждает новизну научно-технических результатов проекта, достигнутых при выполнении работ отчетного этапа;
— показывает прикладную значимость научно-технических задач, решаемых/решенных в ходе выполнения проекта, для дальнейшего развития науки и промышленного производства;
— подтверждает эффективное взаимодействие Получателя с Индустриальным партнёром.
ПРОВЕДЕНИЕ ИСПЫТАНИЙ АИС В СООТВЕТСТВИИ С РАЗРАБОТАННОЙ ПРОГРАММОЙ И МЕТОДИКОЙ ИСПЫТАНИЙ. ОПЫТНАЯ ЭКСПЛУАТАЦИЯ АИС (РАЗДЕЛ 2.2. ПГ)
Проведение испытаний АИС в соответствии с разработанной программой и методикой испытаний. Опытная эксплуатация АИС.
Эксплуатационная документация в соответствии с требованиями ТЗ приведена в отельных документах.
Программа и методики экспериментальных испытаний экспериментального образца информационной системы, отчетная документация в соответствии с нормативными актами, акт экспериментальных исследований в соответствии с требованиями ТЗ приведены в отельных документах.
Подсистема обработки поисковых запросов и выдачи клинических рекомендаций по рациональному применению фармакотерапевтических средств предназначена для реализации возможности специалиста (врача) при назначении какой-либо фармакотерапии ознакомиться не только со стандартными характеристиками препарата, получаемыми из классификаторов, ЕГРЛС, стандартов медицинской помощи, сведений о взаимодействий препаратов в организме человека, взаимодействий препаратов вне организма человека, взаимодействий препаратов и антропометрических параметров человека и т.п., но и с экспертными мнениями иных профильных специалистов. При этом помимо оценок результатов применения препарата, реализован механизм оценки схем его применения.
База знаний содержит экспертные оценки и формируется на основании доступных публикаций о результатах применения того или иного ЛС. Также реализован механизм оценки значимости публикаций, учитывающий не только место, но и авторство публикации (например, оценка значимости фармацевтической компании – производителя препарата должна быть не выше оценки, данной экспертом на основании клинических исследований и практического применения).
Далее, в подразделах представлен обзор фактографических материалов, отражающих процесс: проведения испытаний АИС в соответствии с разработанной программой и методикой испытаний;опытной эксплуатация АИС.
Суммируя оценки выполнения работы, приведенные в подразделах настоящего раздел, можно констатировать, что полученные результаты соответствую требованиям Технического задания (Приложение № 1 к Соглашению – раздел3 пункт4, раздел 4 пункт 4.1.6, 4.1.7, подраздел 2.2 Плана-графика исполнения обязательств: Проведение испытаний АИС в соответствии с разработанной программой и методикой испытаний. Опытная эксплуатация АИС), содержание отчетных материалов:
— соответствует выбранным способам и методам исследований научно-техническим задачам, поставленным перед проектом;
— соответствует используемым инструментам исследований, современному уровню науки;
— подтверждает новизну научно-технических результатов проекта, достигнутых при выполнении работ отчетного этапа;
— показывает прикладную значимость научно-технических задач, решаемых/решенных в ходе выполнения проекта, для дальнейшего развития науки и промышленного производства;
— подтверждает эффективное взаимодействие Получателя с Индустриальным партнёром.
ОБРАБОТКА И ИНТЕРПРЕТАЦИЯ РЕЗУЛЬТАТОВ ЭКСПЕРИМЕНТАЛЬНЫХ ИССЛЕДОВАНИЙ (РАЗДЕЛ 2.3 ПГ)
Настоящая часть отчета выполнена в составе второго этапа ПНИЭР: «Разработка системы принятия информированных врачебных решений для выбора рациональной фармакотерапи и на основании интеллектуального анализа данных», работы Получателя за счет средств гранта: «2.3 Обработка и интерпретация результатов экспериментальных исследований».
Эксплуатационная документация в соответствии с требованиями ТЗ приведена в отельных документах.
Программа и методики экспериментальных испытаний экспериментального образца информационной системы, отчетная документация в соответствии с нормативными актами, акт экспериментальных исследований в соответствии с требованиями ТЗ приведены в отельных документах.
В разделе представлен обзор фактографических материалов, отражающих процесс: проведения испытаний АИС в соответствии с разработанной программой и методикой испытаний;опытной эксплуатация АИС и достигнутые результаты:
1. Применениe методов поиска доказательств по проблематике Covid-19;
2. Математические модели эпидемиологии и распространения Sars-Cov-2
3. Тематическая классификация направлений и актуальных исследований современной медицинской генетики (вступительное слово организаторов конференции)
При проведении экспериментальных исследований подготовлены следующие документы:
Акт приемки системы опытную эксплуатацию представлен в виде отдельного документа.
Протокол испытаний.
Акт экспериментальных исследований представлен в виде отдельного документа
Суммируя оценки выполнения работы, приведенные в подразделах настоящего раздел, можно констатировать, что полученные результаты соответствую требованиям Технического задания (Приложение № 1 к Соглашению – раздел3 пункт4, раздел 4 пункт 4.1.6, 4.1.7), подраздел 2.3 Плана-графика исполнения обязательств. Содержание отчетных материалов:
— соответствует выбранным способам и методам исследований научно-техническим задачам, поставленным перед проектом;
— соответствует используемым инструментам исследований, современному уровню науки;
— подтверждает новизну научно-технических результатов проекта, достигнутых при выполнении работ отчетного этапа;
— показывает прикладную значимость научно-технических задач, решаемых/решенных в ходе выполнения проекта, для дальнейшего развития науки и промышленного производства;
— подтверждает эффективное взаимодействие Получателя с Индустриальным партнёром.
По результам проведения испытаний и подтверждения работоспособности Системы обубликованы две статьи, котрые содержат ссылки на выполняемое исследование:
Gerasimov A, Lebedev G, Lebedev M and Semenycheva I. COVID-19 Dynamics: A Heterogeneous Model. // Frontiers Public Health. 8:558368 (2021). doi: 10.3389/fpubh.2020.558368, URL: Frontiers | COVID-19 Dynamics: A Heterogeneous Model | Public Health (frontiersin.org)
Baranova A.V., Leberfarb E.Yu., Lebedev G.S., Orlov Y.L. Medical genetics studies at the SBB-2019 and MGNGS-2019 conferences // BMC Medical Genetics. 2020; 21 (Suppl 1):186. DOI: 10.1186/s12881-020-01109-8, URL: https://bmcmedgenet.biomedcentral.com/articles/10.1186/s12881-020-01109-8\
ОБОБЩЕНИЕ РЕЗУЛЬТАТОВ ПНИЭР (РАЗДЕЛ 2.4. ПГ)
Настоящая часть отчета выполнена в составе второго этапа ПНИЭР: «Разработка системы принятия информированных врачебных решений для выбора рациональной фармакотерапи и на основании интеллектуального анализа данных», работы Получателя за счет средств гранта: «2.4 Обобщение результатов ПНИЭР».
Эксплуатационная документация в соответствии с требованиями ТЗ приведена в отельных документах.
Программа и методики экспериментальных испытаний экспериментального образца информационной системы, отчетная документация в соответствии с нормативными актами, акт экспериментальных исследований в соответствии с требованиями ТЗ приведены в отельных документах.
В разделе представлен обзор фактографических материалов, отражающих процесс: проведения испытаний АИС в соответствии с разработанной программой и методикой испытаний;опытной эксплуатация АИС и достигнутые результаты.
Суммируя оценки выполнения работы, приведенные в подразделах настоящего раздел, можно констатировать, что полученные результаты соответствую требованиям Технического задания (Приложение № 1 к Соглашению – раздел3 пункт4, раздел 4 пункт 4.1.6, 4.1.7), подраздел 2.4 Плана-графика исполнения обязательств. Содержание отчетных материалов:
— соответствует выбранным способам и методам исследований научно-техническим задачам, поставленным перед проектом;
— соответствует используемым инструментам исследований, современному уровню науки;
— подтверждает новизну научно-технических результатов проекта, достигнутых при выполнении работ отчетного этапа;
— показывает прикладную значимость научно-технических задач, решаемых/решенных в ходе выполнения проекта, для дальнейшего развития науки и промышленного производства;
— подтверждает эффективное взаимодействие Получателя с Индустриальным партнёром.
АНАЛИЗ СООТВЕТСТВИЯ РЕЗУЛЬТАТОВ ТЕОРЕТИЧЕСКИХ И ЭКСПЕРИМЕНТАЛЬНЫХ ИССЛЕДОВАНИЙ ТРЕБОВАНИЯМ ТЗ (РАЗДЕЛ 2.5. ПГ)
Настоящая часть отчета выполнена в составе второго этапа ПНИЭР: «Разработка системы принятия информированных врачебных решений для выбора рациональной фармакотерапи и на основании интеллектуального анализа данных», работы Получателя за счет средств гранта: «2.5 Анализ соответствия результатов теоретических и экспериментальных исследований требованиям ТЗ».
Эксплуатационная документация в соответствии с требованиями ТЗ приведена в отельных документах.
Программа и методики экспериментальных испытаний экспериментального образца информационной системы, отчетная документация в соответствии с нормативными актами, акт экспериментальных исследований в соответствии с требованиями ТЗ приведены в отельных документах.
В разделе представлен обзор фактографических материалов, отражающих процесс: проведения испытаний АИС в соответствии с разработанной программой и методикой испытаний;опытной эксплуатация АИС и достигнутые результаты.
Достижение результатов выполнения работы подстверждается документом «Ведомость соответствия результатов выполнения проекта/работТехническому заданию/Заданию на выполнение работ» представлено отдельно. Финансирование производилось в соответствии с Cоглашение о предоставлении из федерального бюджета грантов вформе субсидий в соответствии с пунктом 4 статьи 78.1 Бюджетного кодекса Российской Федерации от «27» ноября 2019 г. № 075-15-2019-1713.
Полученные результаты соответствую требованиям Технического задания (Приложение № 1 к Соглашению – раздел3 пункт4, раздел 4 пункт 4.1.6, 4.1.7),подраздел 2.5 плана-графика исполнения обязательств.Содержание отчетных материалов:
— соответствует выбранным способам и методам исследований научно-техническим задачам, поставленным перед проектом;
— соответствует используемым инструментам исследований, современному уровню науки;
— подтверждает новизну научно-технических результатов проекта, достигнутых при выполнении работ отчетного этапа;
— показывает прикладную значимость научно-технических задач, решаемых/решенных в ходе выполнения проекта, для дальнейшего развития науки и промышленного производства;
— подтверждает эффективное взаимодействие Получателя с Индустриальным партнёром.
ОЦЕНКА ПОЛНОТЫ РЕШЕНИЯ ЗАДАЧ И ДОСТИЖЕНИЯ ЦЕЛЕЙ ПНИЭР (РАЗДЕЛ 2.6. ПГ)
Настоящая часть отчета выполнена в составе второго этапа ПНИЭР: «Разработка системы принятия информированных врачебных решений для выбора рациональной фармакотерапи и на основании интеллектуального анализа данных», работы Получателя за счет средств гранта: «2.6 Оценка полноты решения задач и достижения целей ПНИЭР».
Эксплуатационная документация в соответствии с требованиями ТЗ приведена в отельных документах.
Программа и методики экспериментальных испытаний экспериментального образца информационной системы, отчетная документация в соответствии с нормативными актами, акт экспериментальных исследований в соответствии с требованиями ТЗ приведены в отельных документах.
В разделе представлен обзор фактографических материалов, отражающих процесс: проведения испытаний АИС в соответствии с разработанной программой и методикой испытаний;опытной эксплуатация АИС и достигнутые результаты.
Суммируя оценки выполнения работы, приведенные в подразделах настоящего раздел, можно констатировать, что полученные результаты соответствую требованиям Технического задания (Приложение № 1 к Соглашению – раздел3 пункт4, раздел 4 пункт 4.1.6, 4.1.7), подраздел 2.6 плана-графика исполнения обязательств. Содержание отчетных материалов:
— соответствует выбранным способам и методам исследований научно-техническим задачам, поставленным перед проектом;
— соответствует используемым инструментам исследований, современному уровню науки;
— подтверждает новизну научно-технических результатов проекта, достигнутых при выполнении работ отчетного этапа;
— показывает прикладную значимость научно-технических задач, решаемых/решенных в ходе выполнения проекта, для дальнейшего развития науки и промышленного производства;
— подтверждает эффективное взаимодействие Получателя с Индустриальным партнёром.
КЛИНИЧЕСКАЯ АПРОБАЦИЯ И ОПЫТНАЯ ЭКСПЛУАТАЦИЯ СОЗДАННОЙ АИС В КЛИНИЧЕСКИХ БОЛЬНИЦАХ СЕЧЕНОВСКОГО УНИВЕРСИТЕТА (РАЗДЕЛ2.7. ПГ)
Настоящая часть отчета выполнена в составе второго этапа ПНИЭР: «Разработка системы принятия информированных врачебных решений для выбора рациональной фармакотерапи и на основании интеллектуального анализа данных», за счет собственных средств грантополучателя из внебюджетных источников: «2.7Клиническая апробация и опытная эксплуатация созданной АИС в клинических больницах Сеченовского университета».
Эксплуатационная документация в соответствии с требованиями ТЗ приведена в отельных документах.
Отчет с информацией по протоколам клинической апробации и оценка эффективности примененияв соответствии с требованиями ТЗ приведен в отельном документе.
В разделе представлен обзор фактографических материалов, отражающих процесс клинической апробации, опытной эксплуатации, созданной АИС в клинических больницах Сеченовского университета и достигнутые результаты.
В рамках государственной программы Российской Федерации «Развитие здравоохранения» начата реализация Федерального проекта «Создание цифрового контура здравоохранения на основе государственной информационной системы в сфере здравоохранения Российской Федерации». Создание цифрового контура подразумевает внедрение интеллектуальных систем поддержки принятия врачебных решений. В современной системе здравоохранения особенно актуальной является задача оптимизация выбора персонализированного подхода и принятия клинического решения из предложенных проверенных методик, основанных на позициях доказательной медицины.
Клиническая апробация разработанной автоматизированной информационной системы (АИС) проводилась на базе клинических больниц Сеченовской академии в соответствии с приказом Минздрава России от 10 июля 2015 г. № 433н ( в ТЗ п.3.6. «Должна быть проведена клиническая апробация созданной АИС в клинических больницах Первого Московского Государственного Университета им.Сеченова(далее Сеченовский университет).Руководством клинических больниц подписывался протокол клинической апробации, приложенный ниже. Целями клинической апробации было применения АИС и мобильных приложений к ней как системы обеспечивающей поддержку принятия врачебных решений в фармакотерапии и базирующейся на знаниях доказательной медицины, таким образом обеспечив реализацию прикладных, образовательных и научных задач, стоящими перед руководством, профессорско – преподавательским составом и врачами специалистами (по направлениям: кардиология,гастроэнтерология, педиатрия,эндокринология, нейрохирургия, гематология, акушерство и гинекология, дерматология, урология, онкология, отоларингология, неврология, пульмонология, инфекционные болезни, общая хирургия, анестезиология, нефрология, ортопедия (ТЗ – п.4.1.3- выполняется). Апробация и опытная эксплуатация системы проходили в период пандемии, поэтому на первое место вышло применение АИС в качестве образовательного, научно-прикладного инструмента для всех специалистов здравоохранения, направленного на решение проблем профилактики, диагностики, лечения и реабилитации пациентов всех возрастов с новой коронавирусной инфекцией. Данная система- система поддержки принятия врачебных решений представляет собой программное обеспечение, призванное оптимизировать работу специалистов, помогая принимать клинические решения относительно обследования, диагностики, квалифицированного назначения лечения пациентам, избегая ошибок и повышая качество оказываемой медицинской помощи, предоставляя постоянно обновляемую информацию, основанную на позициях доказательной медицины. На сегоднящний день система не имеет конкурентоспособного аналога на территории Росиийской Федерации. Апробация проходила в условиях поликлиник и стационаров (на амбулаторном и стационарном этапах), продемонстрировав удобство использования: врачи специалисты могли использовать как стационарные компьютеры, так и мобильные устройства при оказаниии медицинской помощи любой формы (экстренной, неотложной, плановой) и вида(первичной медико-санитарной и специализированной).
Ниже подробно представлен процесс клинической апробации и опытной эксплуатации данной системы в реализации поставленных задач.
Суммируя оценки выполнения работы, приведенные в подразделах настоящего раздел, можно констатировать, что полученные результаты соответствую требованиям Технического задания (Приложение № 1 к Соглашению – раздел3 пункт4, раздел 4 пункт 4.1.6, 4.1.7), подраздел 2.7 плана-графика исполнения обязательств. Содержание отчетных материалов:
— соответствует выбранным способам и методам исследований научно-техническим задачам, поставленным перед проектом;
— соответствует используемым инструментам исследований, современному уровню науки;
— подтверждает новизну научно-технических результатов проекта, достигнутых при выполнении работ отчетного этапа;
— показывает прикладную значимость научно-технических задач, решаемых/решенных в ходе выполнения проекта, для дальнейшего развития науки и промышленного производства;
— подтверждает эффективное взаимодействие Получателя с Индустриальным партнёром;
— подтверждает эффективное выполнение работы за счет собственных средств из внебюджетных источников (Работы, выполняемые за счет средств из внебюджетных источников).
Внедрение АИС подчеркивает значимость пациент-ориетированного подхода в цифровую эру, ставя в центр системы пациента, а не отдельного специалиста, клинику или администратора. Это обеспечивает приближение к решению задачи повышения эффективности всей системы функционирования здравоохранения с определенными контролируемыми критериями. Новый подход способствует формированию единого медицинского пространства, которое благодаря АИС стало возможным, обеспечив функциональную поддержку для руководителей, административного аппарата, врачей и пациентов, обнаруживая преемственность между первичным звеном медицинской помощи и специализированным уровнем высокотехнологичной медицинской помощи, обеспечивая их интеграцию и способствуя сохранению экономических ресурсов, без потерь на ненужные методы обследования и неэффективные методики лечения.
АИС позволяет интегрировать ресурсы, составляющие базу знаний (семантическую сеть применения лекарственных средств) с базой данных, содержащей формализованные нормативные данные, определяющие порядок применения фармакотерапевтических методов, таких как стандарты медицинской помощи, клинические рекомендации.Разработка АИС объединяет базу данных, содержащую формализованные инструкции по применению лекарственных средств, включая соответствие лекарственных средств диагнозам, полу и возрасту пациентов, противопоказания к применению, сведения о несовместимости лекарственных средств, сведения о комплексности применения нескольких препаратов с базой данных, содержащей формализованные данные научных публикаций доказательной медицины со сведениями об оценке лекарственных средств и формализованными алгоритмами расчета показателей их эффективности.
Внедрение АИС открывает следующий этап в области управления взаимоотношениями с пациентами в рамках современной модели, что требует более развитых и удобных инструментов коммуникации между врачом, клиникой и пациентом, интеграции в социальные сети, персонализацию обслуживания пациентов. Таким образом, АИС является сервисом, предназначенным для решения задачи следующего этапа управления процессом здравоохранения. АИС выполняет роль переходной ступени в развитии Российского здравоохранения к стадии внешней интеграции, которая объединит учетные системы ввода, хранения, сбора данных каждой медицинской организации и сервисные системы, что является оптимальным путем ускорения развития системы здравоохранения, повышения ее эффективности. Актуальность использования АИС в эпоху электронных медицинских карт будет расти, поэтому данная стистема перспективна и способна к дальнейшему развитию и совершенствованию в рамках совместимости, скорости и простоты развертывания, а также доступности для любого медицинского учреждения.
ОЦЕНКА РЕЗУЛЬТАТОВ РЕАЛИЗАЦИИ ПРОЕКТА НА СООТВЕТСТВИЕ ТРЕБОВАНИЯМ ТЗ И ОЦЕНКА ЭФФЕКТИВНОСТИ КЛИНИЧЕСКОГО ПРИМЕНЕНИЯ АИС (РАЗДЕЛ 2.8 ПГ)
Настоящая часть отчета выполнена в составе второго этапа ПНИЭР: «Разработка системы принятия информированных врачебных решений для выбора рациональной фармакотерапи и на основании интеллектуального анализа данных», за счет собственных средств грантополучаеля: «2.8 Оценка результатов реализации проекта на соответствие требованиям ТЗ и оценка эффективности клинического применения АИС».
Суммируя оценки выполнения работы, приведенные в подразделах настоящего раздела, можно констатировать, что полученные результаты соответствую требованиям Технического задания (Приложение № 1 к Соглашению – раздел 3 пункт 4, Раздел 4 пункт 4.1.6, 4.1.7), содержание отчетных материалов:
— соответствует выбранным способам и методам исследований научно-техническим задачам, поставленным перед проектом;
— соответствует используемым инструментам исследований, современному уровню науки;
— подтверждает новизну научно-технических результатов проекта, достигнутых при выполнении работ отчетного этапа;
— показывает прикладную значимость научно-технических задач, решаемых/решенных в ходе выполнения проекта, для дальнейшего развития науки и промышленного производства;
— подтверждает эффективное взаимодействие Получателя с Индустриальным партнёром;
— подтверждает эффективное выполнение работы за счет собственных средств из внебюджетных источников (Работы, выполняемые за счет собственных средств из внебюджетных источников)
1. В условиях пандемии, при острой нехватке времени у клиницистов и исследователей на анализ сведений, публикуемых в рецензируемых научных журналах, данная методика с применением методов искусственного интеллекта востребована в клинической практике.
2.Клиническая апробация системы продемонстрировала ее эффективность на всех этапах оказания медицинской помощи вне зависимости от вида, условий оказания медицинской помощи в рамках достижения эффекта по улучшению доступности, качества медицинсклй помощи.
3. Применение разработанной методики было безопасным для пациентов ввиду встроенных в интерфейс программы документов, регламентирующих объем оказания медицинской помощи согласно действующим клиническим рекомендациям и обновляемым научно-обоснованным данным, доказавших свою безопасность и эффективность.
4.Система продемонстрировала простоту и удобство использования при принятии врачебного решения благодаря быстрой работе системы, эффективному поиску, простому интерфейсу.
РАЗРАБОТКА КОНТЕНТА (ДЛЯ ИНФОРМАЦИОННОГО НАПОЛНЕНИЯ БД АИС) (РАЗДЕЛ 2.9 ПГ)
Настоящая часть отчета выполнена в составе второго этапа ПНИЭР: «Разработка системы принятия информированных врачебных решений для выбора рациональной фармакотерапи и на основании интеллектуального анализа данных», работы Получателя за счет средств индустриального партнера: «2.9 Разработка контента (для информационного наполнения БД АИС)». Работу выполнял соисполнитель в соовтсевтсвии с договором подряда – МГУ им. М.В.Ломоновсова.
Содержание отчета представлено в следующих отчетных документах:
1.Отчет о разработке контента (для информационного наполнения БД АИС). Часть 1. В документе приведены результаты отработки поисковых запросов по информационным ресурсам содержащих сведения о характеристиках действующих веществ лекарственных препаратов и их взаимодействиях.
2. Отчет о разработке контента (для информационного наполнения БД АИС). Часть 2.В документе приведены результаты отработки поисковых запросов по информационным ресурсам содержащих сведения о характеристиках действующих веществ лекарственных препаратов и их взаимодействиях.
3. Отчет о разработке контента (для информационного наполнения БД АИС). Часть 3.В документе приведены результаты отработки поисковых запросов по информационным ресурсам содержащих сведения о характеристиках действующих веществ лекарственных препаратов и их взаимодействиях.
4. Отчет о разработке контента (для информационного наполнения БД АИС). Часть 4.В документе приведены результаты отработки поисковых запросов по информационным ресурсам содержащих сведения о характеристиках действующих веществ лекарственных препаратов и их взаимодействиях.
5. Отчет о разработке контента (для информационного наполнения БД АИС). Часть 5.В документе приведены результаты отработки поисковых запросов по информационным ресурсам содержащих сведения о характеристиках действующих веществ лекарственных препаратов и их взаимодействиях.
6. Отчет о разработке контента (для информационного наполнения БД АИС). Частьм 6.В документе приведены результаты отработки поисковых запросов по информационным ресурсам содержащих сведения о характеристиках действующих веществ лекарственных препаратов и их взаимодействиях.
7. Отчет о разработке контента (для информационного наполнения БД АИС). Часть 7. В документе приведены результаты отработки поисковых запросов по информационным ресурсам содержащих сведения о характеристиках действующих веществ лекарственных препаратов и их взаимодействиях.
В этих документах представлен обзор фактографических материалов, отражающих процесс разработки контента для информационного наполения базы данных АИС и достигнутые результаты в области реализации проекта на соответствие требованиям ТЗ и оценка эффективности клинического применения АИС.
Разработка контента (для информационного наполнения БД АИС), в свою очередь, разбивается на наполнение:
• данными по применению лекарственных средств, включая соответствие лекарственных средств диагнозам, полу и возрасту пациентов, противопоказания к применению, сведения о несовместимости лекарственных средств, сведения о комплексности применения нескольких препаратов;
• формализованными данными научных публикаций доказательной медицины, сведениями об оценке лекарственных средств и результатами расчета показателей их эффективности.
Суммируя оценки выполнения работы, приведенные в подразделах настоящего раздел, можно констатировать, что полученные результаты соответствую требованиям Календарного плана (п.2.9.), Технического задания (Приложение № 1 к Соглашению – раздел3 пункт4, Раздел 4 пункт 4.1.6, 4.1.7),подраздел 2.9 плана-графика исполнения обязательств.
Содержание отчетных материалов:
— соответствует выбранным способам и методам исследований научно-техническим задачам, поставленным перед проектом;
— соответствует используемым инструментам исследований, современному уровню науки;
— подтверждает новизну научно-технических результатов проекта, достигнутых при выполнении работ отчетного этапа;
— показывает прикладную значимость научно-технических задач, решаемых/решенных в ходе выполнения проекта, для дальнейшего развития науки и промышленного производства;
— подтверждает эффективное взаимодействие Получателя с Индустриальным партнёром;
— подтверждает эффективное выполнение работы за счет средств Индустриального партнера.
РАЗРАБОТКА КОМПЛЕКТА ЭКСПЛУАТАЦИОННОЙ ДОКУМЕНТАЦИИ НА АИС И МОБИЛЬНЫЕ ПРИЛОЖЕНИЯ К НЕЙ (РАЗДЕЛ 2.10 ПГ)
Настоящая часть отчета выполнена в составе второго этапа ПНИЭР: «Разработка системы принятия информированных врачебных решений для выбора рациональной фармакотерапи и на основании интеллектуального анализа данных», работы Получателя за счет средств Индустриального партнера: «2.10 Разработка комплекта эксплуатационной документации на АИС и мобильные приложения к ней».
Описание применения АИС, Описание комплекса технических средств АИС и Формуляр на АИСв соответствии с требованиями ТЗ приведены в отельных документах.
В разделе представлен обзор фактографических материалов, отражающих процесс разработки комплекта эксплуатационной документации на АИС и мобильные приложения к ней и достигнутые результаты в области реализации проекта на соответствие требованиям ТЗ.
Суммируя оценки выполнения работы, приведенные в подразделах настоящего раздел, можно констатировать, что полученные результаты соответствую требованиямсоответствую требованиям Календарного плана (п.2.10) и Технического задания (Приложение № 1 к Соглашению – раздел3 пункт4, раздел 4 пункт 4.1.6), подраздел 2.10 плана-графика исполнения обязательств.
Содержание отчетных материалов:
— соответствует выбранным способам и методам исследований научно-техническим задачам, поставленным перед проектом;
— соответствует используемым инструментам исследований, современному уровню науки;
— подтверждает новизну научно-технических результатов проекта, достигнутых при выполнении работ отчетного этапа;
— показывает прикладную значимость научно-технических задач, решаемых/решенных в ходе выполнения проекта, для дальнейшего развития науки и промышленного производства;
— подтверждает эффективное взаимодействие Получателя с Индустриальным партнёром;
— подтверждает эффективное выполнение работы за счет средств Индустриального партнера.
РАЗРАБОТКА ПРЕДЛОЖЕНИЙ ПО РЕАЛИЗАЦИИ РЕЗУЛЬТАТОВ ПРОЕКТА, ИХ ВОЗМОЖНОЙ КОММЕРЦИАЛИЗАЦИИ И ВОВЛЕЧЕНИЮ В ХОЗЯЙСТВЕННЫЙ ОБОРОТ (РАЗДЕЛ 2.11 ПГ)
Настоящая часть отчета выполнена в составе второго этапа ПНИЭР: «Разработка системы принятия информированных врачебных решений для выбора рациональной фармакотерапи и на основании интеллектуального анализа данных», работы Получателя за счет средств Индустриального партнера: «2.11 Разработка предложений по реализации результатов проекта, их возможной коммерциализации и вовлечению в хозяйственный оборот».
Эксплуатационная документация на АИСи Пояснительная записка в соответствии с требованиями ТЗ приведены в отельных документах.
В разделе представлен обзор фактографических материалов, отражающих процесс разработки предложений по реализации результатов проекта, их возможной коммерциализации и вовлечению в хозяйственный оборот, а также достигнутые результаты в области реализации проекта на соответствие требованиям ТЗ.
Основная информация по данному разделу представлена в отельных документах «Эксплуатационная документация» и «Пояснительная записка».
Суммируя оценки выполнения работы, приведенные в подразделах настоящего раздел, можно констатировать, что полученные результаты соответствую требованиям Технического задания (Приложение № 1 к Соглашению – раздел3 пункт4, раздел 4 пункт 4.1.6, 4.1.7), подраздел 2.11 плана-графика исполнения обязательств.
Содержание отчетных материалов:
— соответствует выбранным способам и методам исследований научно-техническим задачам, поставленным перед проектом;
— соответствует используемым инструментам исследований, современному уровню науки;
— подтверждает новизну научно-технических результатов проекта, достигнутых при выполнении работ отчетного этапа;
— показывает прикладную значимость научно-технических задач, решаемых/решенных в ходе выполнения проекта, для дальнейшего развития науки и промышленного производства;
— подтверждает эффективное взаимодействие Получателя с Индустриальным партнёром;
— подтверждает эффективное выполнение работы за счет средств Индустриального партнера.
РАЗРАБОТКА МОБИЛЬНОГО ПРИЛОЖЕНИЯ ДЛЯ РАБОТЫ СДАННЫМИ АИС ПО ПРИМЕНЕНИЮ ЛЕКАРСТВЕННЫХ СРЕДСТВ, ВКЛЮЧАЯ СООТВЕТСТВИЕ ЛЕКАРСТВЕННЫХ СРЕДСТВ ДИАГНОЗАМ, ПОЛУ И ВОЗРАСТУ ПАЦИЕНТОВ, ПРОТИВОПОКАЗАНИЯ К ПРИМЕНЕНИЮ, СВЕДЕНИЯ О НЕСОВМЕСТИМОСТИ ЛЕКАРСТВЕННЫХ СРЕДСТВ, СВЕДЕНИЯ О КОМПЛЕКСНОСТИ (РАЗДЕЛ 2.12 ПГ)
Настоящая часть отчета выполнена в составе второго этапа ПНИЭР: «Разработка системы принятия информированных врачебных решений для выбора рациональной фармакотерапи и на основании интеллектуального анализа данных», работы выполнены за счет собственных средств индустриального партнера из внебюджетных источниокв: «2.12 Разработка мобильного приложения для работы сданными АИС по применению лекарственных средств, включая соответствие лекарственных средств диагнозам, полу и возрасту пациентов, противопоказания к применению, сведения о несовместимости лекарственных средств, сведения о комплексности».
В состав отчетной документации входят следующие документы, представленные отдельно:
1. Текст программы (Код программы) мобильного приложения для работы с данными АИС по применению лекарственных средств, включая соответствие лекарственных средств диагнозам, полу и возрасту пациентов, противопоказания к применению, сведения о несовместимости лекарственных средств.
2. Описание программного обеспечения (описание программы) мобильного приложения для работы с данными АИС по применению лекарственных средств, включая соответствие лекарственных средств диагнозам, полу и возрасту пациентов, противопоказания к применению, сведения о несовместимости лекарственных средств.
3. Руководство пользователя мобильного приложения для работы с данными АИС по применению лекарственных средств, включая соответствие лекарственных средств диагнозам, полу и возрасту пациентов, противопоказания к применению, сведения о несовместимости лекарственных средств.
В этих документах представлен обзор фактографических материалов, отражающих процесс разработки мобильного приложения для работы сданными АИС по применению лекарственных средств, включая соответствие лекарственных средств диагнозам, полу и возрасту пациентов, противопоказания к применению, сведения о несовместимости лекарственных средств, сведения о комплексности, а также достигнутые результаты в области реализации проекта на соответствие требованиям ТЗ.
Суммируя оценки выполнения работы, приведенные в подразделах настоящего раздел, можно констатировать, что полученные результаты соответствую требованиям Календарного плана (п.2.12.), Технического задания (Приложение № 1 к Соглашению – раздел3 пункт4, раздел 4 пункт 4.1.3, 4.1.6, 4.1.7),подраздел 2.12 плана-графика исполнения обязательств.
Содержание отчетных материалов:
— соответствует выбранным способам и методам исследований научно-техническим задачам, поставленным перед проектом;
— соответствует используемым инструментам исследований, современному уровню науки;
— подтверждает новизну научно-технических результатов проекта, достигнутых при выполнении работ отчетного этапа;
— показывает прикладную значимость научно-технических задач, решаемых/решенных в ходе выполнения проекта, для дальнейшего развития науки и промышленного производства;
— подтверждает эффективное взаимодействие Получателя с Индустриальным партнёром;
— подтверждает эффективное выполнение работы за счет средств Индустриального партнера из внебюджетных источников.