СИСТЕМА И СПОСОБ ОБРАБОТКИ ДАННЫХ ДЛЯ КОМПЛЕКСНОЙ ОЦЕНКИ ЗРЕЛОСТИ НАУЧНО-ТЕХНОЛОГИЧЕСКОГО ПРОЕКТА НА ОСНОВЕ ИСПОЛЬЗОВАНИЯ НАБОРА ПАРАМЕТРОВ Российский патент 2020 года по МПК G06F17/18 

ОБЛАСТЬ ТЕХНИКИ

Изобретение относится к вычислительной технике и, в частности, к системам и способам оценки научно-технологических проектов, применяемым с целью выявления текущего состояния таких проектов с точки зрения готовности получаемых в ходе их выполнения результатов к коммерциализации и практическому применению в реальных секторах экономики по значению набранных баллов по оцениваемым критериям и построения рейтинга для нескольких оцениваемых проектов по возрастанию или убыванию набранных баллов.

Изобретение представляет собой инструментарий, обеспечивающий поддержку при принятии управленческих и экспертных решений о финансировании того или иного проекта в широком круге дисциплин, таких, например, как, промышленное производство, прикладные научные и экспериментальные разработки, информационно-коммуникационные технологии и разработка программного обеспечения, а также в области разработки лекарственных средств и медицинских изделий. Изобретение может быть реализовано с использованием компьютерных технологий.

Термин «зрелость проекта» (от англ. «project maturity))) является в настоящее время в значительной степени общеупотребимым в данной области техники; для целей данной заявки он может пониматься как «готовность проекта», «степень завершенности проекта».

УРОВЕНЬ ТЕХНИКИ

Из уровня техники известны технические решения, обеспечивающие оценку уровня зрелости проектов на основе изучения различных сведений, присущих этим проектам, а также решения, обеспечивающие оценку уровня зрелости технологий, разрабатываемых в ходе выполнения научно-технологических проектов, с точки зрения уровня ее технологической готовности, т.е. определение положения уровня технологии на временной шкале, описывающей процесс ее разработки, и, соответственно, определяющего степень готовности разрабатываемой технологии к промышленному внедрению и использованию.

Например, в современной практике для оценки уровня готовности технологии (технологической готовности) широкое распространение получили методы, базирующиеся на количественных и качественных оценках показателей, описывающих технические аспекты технологии, интеграцию ее компонентов и ее конечную интеграцию в систему и окружающую среду. Выбор показателей (критериев) и их оценка может осуществляться с учетом определений международных стандартов на основе использования правил описания состояний, присущих атрибутам технологии, и их соотнесения с разрабатываемой технологией. Однако, такие методы не позволяют проводить комплексную оценку зрелости научно-технологических проектов по целой совокупности показателей, которыми может быть описан проект, при принятии управленческих решений. Если же говорить об оценке проектов в целом, то, в современной практике в настоящее время используются методы оценки специфических сведений о проектах, относящихся к узконаправленным сферам производства и научно-исследовательских дисциплин, т.е. практически для каждой из этих сфер применяются методы, обладающие особенностями, которые не позволяют их распространить на другие области науки и техники.

В этой связи актуальной является задача, связанная с разработкой алгоритма процесса проведения упомянутой комплексной оценки зрелости, в том числе, как текущего состояния, так и готовности к целом, научно-технологических проектов для широкого круга дисциплин на основе использования параметров, описывающих сбалансированное развитие проектов, с получением объективного результата оценки и обеспечением наглядного его представления, а также возможности ранжирования проектов, которая решается в заявляемом изобретении.

Из уровня техники известно решение, представленное в патенте на изобретение US 10241786 B2 (публикация US 20180210728, 26.07.2018) «Evaluating Project Maturity from Data Sources» (2019), направленное на построение автоматической системы оценки уровня зрелости проектов в сфере разработки программного обеспечения - библиотек программ и сервисов. Оценка производится на основе изучения набора артефактов, к которым могут относится документы, репозитории исходного кода, задания в системе мониторинга и отслеживания ошибок, а также сведения из других источников о выполняемом проекте, например, из источников, размещенных в сети Интернет, таких, например, как порталы обсуждений, блоги и т.п. Отметим, что изобретение описывает способ оценки, в котором предложено устанавливать для каждого проекта свой индивидуальный набор артефактов на основе типовых шаблонов, разрабатываемых заранее, и составленных с использованием стандартов программной инженерии. Система оценки, предложенная в данном изобретении, устанавливает достаточность данных о проекте в определенный момент времени, для подтверждения артефактов, соотнесенных с различными уровнями зрелости проекта, при этом способ классификации уровней зрелости в изобретении не приводится. Вектор артефактов предварительно на входе проецируется на несколько аналитических систем, производящих их оценку, которые присваивают различным артефактам веса, полученные на основе использования методов обработки данных о множестве проектов, после чего проводится окончательная оценка набора артефактов и определение уровня зрелости проекта с использованием набора решающих правил. Механизм классификации артефактов и построение решающих правил этой системы оценки построен на принципах машинного обучения, источником информации для этого процесса служит база данных, в которую заносится информация по всем проектам для последующего создания решающих правил. Система оценки является настраиваемой под требования конечных пользователей, что дает основание утверждать, что механизмы оценки различными пользователями одинаковых проектов могут привести к различным результатам.

Заявляемое изобретение, в отличие, от US 10241786 B2, позволяет создавать системы для оценки проектов, имеющих отношение к существенно большему кругу научно-технических дисциплин, чем разработка программных библиотек и сервисов, кроме того заявляемое изобретение хотя и связано с исследованием научно-технологических проектов по наборам сведений о них, однако характеризуется своей совокупностью существенных признаков - содержат иную последовательность действий и совершенно иной по функциональному назначению состав взаимосвязанных блоков и иной набор оценочных параметров, который наилучшим образом описывает сбалансированное развитие проекта с точки зрения практического применения его результатов.

В частности, заявляемое изобретение реализует иной алгоритм обработки и интерпретации данных о научно-технологических проектах по определенным параметрам, предложенным авторами изобретения, которые отличаются от известного решения.

Так, например, в заявляемом изобретении кроме данных о проекте, которые формируются не виде вектора, а в виде многомерной иерархической структуры, используются не только непосредственно сами данные, но также и оценка их качества, получаемая на основе обработки экспертных заключений о проекте.

Последовательность действий, реализуемая заявляемой системой, также отличается от вышеописанного известного решения. В частности, в US 10241786 B2 после построения вектора артефактов идет этап построение весового вектора для каждого набора, после оценки которого и выносится решение на основе решающих правил о готовности рассматриваемого проекта к завершению. В заявляемом решении после сбора данных о проекте и исследования экспертных заключений, обработка этой информации производится на основе иной последовательности действий. Существенной особенностью заявляемой системы является то, что она позволяет измерять конкретный параметр - величину, характеризующую степень зрелости проекта, а также готовность его результатов к использованию в реальном секторе экономики, которая может быть классифицирована по предложенной в заявляемом изобретении шкале. При этом произведенные усовершенствования позволяют повысить точность комплексной оценки уровня текущего состояния проекта или его готовности к коммерциализации за счет представленной совокупности блоков с наделенным функционалом и связями между ними.

Кроме того, в заявляемом решении результатами оценки являются и другие количественные параметры, например, индекс зрелости проекта, характеризующий динамику развития научно-технологического проекта на малых временных интервалах, причем не обязательно совпадающих с контрольными точками WBS (от англ. Work Breakdown Structure - структура декомпозиции работ, в частности, план-график выполнения работ). В заявляемом изобретении реализуется функциональность ранжирования проектов на основе значений индекса зрелости для научно-технологических проектов для неограниченного круга научно-технических дисциплин, в которых они выполняются, в т.ч. научно-исследовательских и прикладных проектов, проектов в сфере разработке программного обеспечения и создания автоматизированных, информационных систем и в сфере робототехники, а также в сфере разработки лекарственных средств и медицинских изделий.

В настоящее время для практической оценки технологии используется т.н. шкала TRL (от англ. Technology Readiness Level), включающая 9 уровней - от первого, когда технология переходит этап от фундаментальных к прикладным исследованиям, до девятого, относящегося к этапу фактического применения технологии в реальной окружающей среде и условиях эксплуатации. Как правило, задача определения уровня готовности технологии решается посредством сбора необработанных данных, связанных с технологией и последующим применением т.н. калькуляторов TRL, представляющих собой вычислительные системы, построенные на основе табличного процессора Excel. В современной практике технические решения по созданию систем оценки готовности технологии не только как таковой непосредственно, но и с точки зрения ее интеграции в реальные системы, связаны с построением систем, так или иначе оптимизирующих процесс обработки данных, способы хранения данных и повышение эффективности вычислений.

Так, например, из уровня техники известно решение, представленное в изобретении CN 102890753 A (публикация CN 102890753 A, 23.01.2013) technology readiness level (TRL) determination method based on technology readiness attribute)) (2012). Метод, предложенный в изобретении, построен на использовании определений различных уровней TRL, принятых в международных стандартах. Определения уровня TRL происходит с использованием данных об атрибутах, относящихся к конкретному уровню TRL. Метод исследует атрибуты, относящиеся к самой технологии, ее интеграции с системой и окружающей средой. Для того, чтобы определить соответствие атрибутов заданным критериям разрабатываются анкеты (чеклисты), данные из которых затем подвергаются статистической обработке для установления параметров, которые могут использованы при проведении оценки технологической зрелости. Метод, предложенный в данном изобретении, позволяет вносить изменения в стандартные (типовые) чеклисты оценки на основе изучения экспертных заключений для множества оцененных проектов.

Заявляемое изобретение позволяет производить в отличие от CN 102890753 A оценку существенно большего набора атрибутов проекта, которые объединяются в такие группы как

- группа атрибутов проекта, определяющих технологическую готовность проекта (TR - Technology Readiness);

- группа атрибутов проекта, определяющих производственную готовность проекта (MR, от англ. Manufacturing Readiness);

- группа атрибутов проекта, определяющих инженерную готовность проекта (ER, от англ. Engineering Readiness);

- группа атрибутов проекта, определяющих готовность организационного обеспечения проекта (OR, от англ. Organizational Readiness);

- группа атрибутов проекта, определяющих преимущества проекта и сглаживание рисков проекта (SR, от англ. Superiority Readiness - для достижения преимуществ необходимо минимизировать риски);

- группа атрибутов проекта, определяющих рыночную готовность проекта, т.е. готовность результатов проекта к коммерциализации и использованию в реальном секторе экономики (CR, от англ. Commercial Readiness).

В отличие от CN 102890753 A заявляемое изобретение позволяет оценивать атрибуты вышеуказанных степеней готовности по непрерывной шкале оценки от 0 до 1, а не только на основе использования чеклистов, предполагающих бинарную систему оценки - 0 или 1.

В отличие от CN 102890753 A заявляемое изобретение позволяет вносить изменения не только в шаблоны анкет оценки для различных проектов, но и в анкету оценки конкретного проекта, который оценивает эксперт, динамически, не затрагивая при этом библиотеку шаблонов экспертных анкет (чеклистов).

Из уровня техники известно изобретение CN 103226743 В (публикация CN 103226743 B, 13.07.2016) «Aviation equipment and technology maturity assessment trl information processing method based on» (2012), направленное на построение компьютерной вычислительной системы оценки зрелости технологий в сфере разработки авиационного оборудования. В нем описана иерархическая структура информационной базы, содержащей сведения об образцах авиационной техники и значения уровней TRL, которыми они обладают. В изобретении предложена система на основе разделения уровней доступа к ней, которая на основе запроса пользователя, а зависимости от его прав, либо позволяет редактировать шаблоны анкет для оценки, либо только производит непосредственно оценку. В данном изобретении описан способ добавления критериев оценки, их модификации и удаления, которые теперь могут задаваться не только из стандартных определений уровней TRL и их атрибутов, но и из WBS проекта.

В отличие от CN 103226743 В заявляемое изобретение расширяет сферу применения разработанного метода оценки, т.е. может применяться для существенно большего круга научно-технических и производственных дисциплин, а также определять не только уровень зрелости проекта, но также и такие уровни готовности, как TR, MR, CR, SR, OR, ER. Кроме этого, в заявляемом изобретении критерии оценки установлены на основе личной многолетней практики проведения экспертной оценки научно-технологических проектов, опыта их выполнения, а также на основе изучения ГОСТ и различных практик проектной деятельности, поэтому в нем наряду с процедурами модификации, удаления или добавления критериев оценки как таковых используются процедуры добавления или изменения отдельных показателей этих критериев оценки, причем эти процедуры могут осуществляться как на этапе создания шаблона экспертной анкеты для оценки проекта, так и непосредственно в любой момент проведения оценки проекта, что отличает заявляемое изобретение от CN 103226743 В. Важным является также то обстоятельство, что в заявляемом изобретении помимо возможностей редактирования анкет и проведения оценки предусмотрена обратная связь с исполнителями проектов, т.е. формирование для них набор рекомендаций по повышению эффективности выполнения работ.

Предлагаемое изобретение позволяет преодолеть, по крайней мере, часть вышеуказанных недостатков или все указанные недостатки, а также реализовать преимущества настоящего изобретения, как описано в рамках настоящего изобретения.

СУЩНОСТЬ ИЗОБРЕТЕНИЯ

Задачей настоящего изобретения является разработка нового решения, касающегося оценки научно-технологических проектов для широкого круга научно-технических дисциплин, разработки лекарственных препаратов и медицинских изделий, информационно-коммуникационных технологий и разработки программного обеспечения, а также промышленного производства на предмет оценки их зрелости с точки зрения готовности их результатов к коммерциализации и промышленному внедрению, обеспечивающего, в т.ч. повышение объективности и достоверности экспертной оценки при принятии управленческих решений органами управления соответствующих компаний и ведомств в рамках их бизнес-процессов по администрированию исследований и разработок в научно-технологической сфере.

Технический результат, достигаемый предлагаемым изобретением, состоит в обеспечении возможности обработки разнородных данных, касающихся исследований и разработок в научно-технологической сфере, информационно-коммуникационных технологиях и разработки программного обеспечения, а также в производстве лекарственных препаратов и медицинских изделий и в промышленном производстве, что позволяет произвести оценку исследуемых проектов и осуществить ранжирование получаемых результатов. Кроме того, заявляемое изобретение позволяет увеличить производительность системы при решении поставленной задачи (т.е. позволяет производить обработку с получением результата (продукта) за меньшее количество времени). Кроме того, измерение по каждому из оцениваемых проектов величины, характеризующей уровень зрелости проекта как степень его готовности базируется на динамически пополняемом наборе данных, обладает инкрементальными свойствами, а, поэтому, требует минимального количества запросов, следовательно, меньшего количества машинного времени и ресурсов для обработки и получения результата, в том числе оперативной памяти. Кроме того, изменение физического состояния блока обработки, связанное с добавлением нового функционала, обеспечивает возможность меньшее количество раз запускать систему для получения результата и, следовательно, экономить энергию, потребляемую данной системой. Кроме того, снижение количества обрабатываемых запросов (за счет использования функционала, обеспечивающего инкрементальную обработку информационного массива данных о проекте по определенному алгоритму с использованием целевых критериев) снижает и вероятность ошибки, влияющей на получение более точного и достоверного результата. Таким образом, заявляемое изобретение обеспечивает получение объективной и достоверной количественной оценки (в баллах), характеризующей индекс зрелости проекта за счет использования инструментария, позволяющего учитывать определенную совокупность значимых для данной задачи критериев и их градации.

Согласно одному из вариантов реализации, предлагается способ комплексной оценки зрелости научно-технологического проекта, в котором на основе использования набора параметров: осуществляется формирование массива информации, составленного с использованием данных, содержащихся в требованиях нормативных документов и стандартов, предъявляемых к процессам выполнения проекта, и идентифицирующей и характеризующей уровни зрелости проектов и включающей базовый набор данных, включающий базовый перечень состояний, базовый перечень задач, базовый перечень работ, базовый перечень свидетельств, подтверждающих получение результатов работ с требуемым качеством, посредством добавления параметров, идентифицирующих и характеризующих уровни зрелости проектов; осуществляется формирование массива информации, содержащего значения величин, характеризующие веса каждого из свидетельств для принятия решения о том, что работа выполнена в полном объеме с требуемым качеством, причем величины характеризуют важность каждого из оцениваемых свидетельств, по сравнению с другими свидетельствами; осуществляется формирование шаблонов экспертных анкет из данных массивов информации; осуществляется формирования набора данных из данных, содержащихся в документах проекта; осуществляется задание параметров начальных и конечных значений оцениваемых параметров и критериев уровня зрелости проекта, временной шкалы с расположенными на ней контрольными точками и прогнозируемыми значениями индекса зрелости проекта, прогноза их изменения по времени выполнения проекта, которые характеризуют проект, из данных сформированного набора данных, где прогноз является вычислением параметров проекта по временной шкале с установлением факта того, оправдывается прогноз или нет; осуществляется оценка качества фактов, извлеченных из оцениваемых документов, с использованием заданных значений оценки фактов и данных документов исполнителей проектов для оценки свидетельств, подтверждающих получение результатов, при этом полученной оценке соответствует численное значение степени уверенности, при которой свидетельство подтверждает наличие в материалах проектах результата, для описания которого оно представлено исполнителем проекта в составе документации по проекту; осуществляется вычисление скорректированного вектора достигнутых состояний уровня зрелости проекта, где скорректированный вектор достигнутых состояний уровня зрелости формируется после коррекции результата расчета состояний с использованием матрицы взаимосвязи, причем: осуществляется вычисление значения достигнутого состояния уровня зрелости проекта, S_I для каждого из проектов посредством перемножения количественных значений показателей T_J для каждой задачи, каждый из которых характеризует итог ее решения и вычисляется посредством перемножения всех значений A_M результатов работы с целью определения полноты решения задачи, где индекс М принимает значения от 1 до N_TJ, причем значение A_M равно единице для выполненной работы A_M, если значение величины W_A больше либо равно значения W пороговой, или для не выполненной работы A_M равно нулю, если значение W_A меньше порогового значения W_порог, для работ из перечня работ T_J|A={A_M, М=1,2,…,N_TJ}, направленных на достижение соответствующей готовности проекта - TR, MR, ER, OR, SR, CR, где TR - технологическая готовность, MR производственная готовность, ER инженерная готовность, OR - готовность организационного обеспечения проекта, SR - работ по обеспечению преимуществ проекта и сглаживанию рисков проекта, CR - работ по определению рыночной готовности и коммерциализации результатов проекта, на определенном уровне зрелости L проекта, ассоциированных с показателем T_J задачи, и свидетельств из перечня свидетельств о результатах их выполнения A_M|Е={E_U, U=1,2,…,N_AM}, указанных в документах, представляемых исполнителем проекта для установления факта выполнения работы, где количественное значение выполнения работы устанавливается по всей совокупности входящих в нее свидетельств на основании сравнения величины W_A, рассчитываемой по формуле и позволяющей при оценке сделать вывод о том, что результат выполнения работы удовлетворяет ранее заданным требованиям, с пороговой величиной W_порог, где свидетельства E_U характеризуются задаваемым весовым коэффициентом W(E_U), величина которого характеризует вклад каждого свидетельства E_U для принятия утвердительного решения о получении результата, соответствующего требуемому качеству, а также относительную важность свидетельств получения требуемых результатов, причем если полученный результат соответствует установленным требованиям, то E_U=W(E_U), если же качество какого-либо из оцениваемых свидетельств не соответствует заданным требованиям, то значение E_U приравнивается величине W(E_U), умноженной на поправочный коэффициент Q(E_U), причем если информация о свидетельстве в материалах проекта отсутствует, то значение Wu умножается на поправочный коэффициент, значение которого равно нулю, а если качество представленного свидетельства удовлетворяет требованиям, то значение W_U умножается на поправочный коэффициент, значение которого равно единице; осуществляется корректировка значений координат вектора достигнутых состояний с использованием матрицы взаимосвязи ММ, элементы которой определяют взаимосвязь между состояниями заданного уровня зрелости проекта с использованием данных требований нормативных документов и стандартов, предъявляемых к процессам выполнения инновационных проектов, причем каждый элемент матрицы устанавливается на основе правила MM_I,J=l/R, если состояние S_I связано с состоянием S_J, и ноль, если нет, причем значение R равно количеству всех связей состояния S_I с остальными состояниями, в том числе самим собой, и для корректировки значения вектора состояний А он умножается справа на матрицу ММ по правилам матричного умножения, причем если в итоге каждая компонента вектора S равна 1, то текущий уровень зрелости проекта TPML в данный момент времени достигнут, а если он совпадает с прогнозным значением, установленным в контракте или соглашении на выполнение проекта, то проект выполняется в соответствии с установленными требованиями и не требует принятия мер оперативного реагирования; осуществляется вычисление значения уровня зрелости проекта, TPML_L, с использованием декомпозиции процесса выполнения проекта как системы состояний, задач, работ и свидетельств получения результатов работ в процессе выполнения проекта, где каждому уровню зрелости L проекта соответствует набор состояний и соответствующие им количественные значения L|S={S_I, I=1,2,…N_L}, причем значения S_I равны единице («1»), если состояния достигнуты, и нулю («0»), если нет, и для достижения указанных состояний исполнителями проекта должны быть решены соответствующие задачи, которым также ставятся в соответствие количественные значения, по крайней мере, для показателя S_I|Т={TJ, J=1,2,…,NS_I}, причем значения T_J равны единице, если соответствующая задача решена, и - нулю, если нет, и каждая задача разбивается на ряд работ, направленных на достижение соответствующей готовности проекта - TR, MR, ER, OR, SR, CR, которым также ставятся в соответствие количественные значения, по крайней мере, для задачи T_J|A={A_M, M=1,2,…,N_TJ}, причем значения A_M равны единице, если работа выполнена, и - нулю, если нет, причем итогом выполнения этих работ являются результаты, которым также ставятся в соответствие количественные значения, по крайней мере, для работы A_M|Е={E_U, U=1,2,…,N_AM}, а доказательства получения результатов являются описания и свидетельства в совокупности с фактами, E_U, которые представляются исполнителями проекта в составе документов о ходе выполнения проекта, где значениям E_U также ставятся в соответствие количественные величины, причем такие данные о полученных результатах являются набором оцениваемых свидетельств и значение E_U зависит от того, каково качество содержащихся в проектной документации E_U|D={D_Y, Y=1,2,…,N_EU} подтверждающих сведений об этом свидетельстве, причем: значение уровня зрелости проекта TPML_L равно уровню зрелости проекта, L, если каждое вычисленное значение достигнутого состояния уровня зрелости проекта, S_I, равно единице, или равно значению L минус единица в противном случае; осуществляется вычисление значения индекса зрелости проекта, причем: осуществляется вычисление общего количества всех состояний N уровня зрелости, как достигнутых - NN, так и не достигнутых, как сумма всех состояний N уровня зрелости; осуществляется расчет значения индекса зрелости проекта I_M проекта по формуле I_M=TPML_L - 1 + NN/N; осуществляется вычисление значений критериев K_TR, K_MR, K_ER, K_OR, K_SR, K_CR, определяющих полноту выполнения работ по проекту, описывающих в совокупности сбалансированное развитие проекта и направленных на достижение технологической готовности, TR; производственной готовности, MR; инженерной готовности, ER; готовности организационного обеспечения проекта, OR; работ по обеспечению преимуществ проекта и сглаживанию рисков проекта, SR; работ по определению рыночной готовности и коммерциализации результатов проекта, CR; на определенном уровне зрелости в момент проведения оценки уровня зрелости проекта, причем: осуществляется вычисление значений NN_TR, NN_MR, NN_ER, NN_OR, NN_SR, NN_CR, определяющих количество реально выполненных работ, рассчитанное по координатам скорректированного вектора достигнутых состояний S, для чего сначала осуществляется корректировка значений T_J, где если значение S_I равно единице, то все связанные с ним значения T_J равны единице, а если значение SI равно нулю, то все связанные с ним значения T_J равны нулю; осуществляется корректировка значений A_M, где если значение T_J равно единице, то все значения A_M, ассоциированные с ним, устанавливаются равными единице, а если значение T_J равно нулю, то все значения A_M, ассоциированные с ним, устанавливаются равными нулю; для вычисления полноты выполнения работ на определенном уровне зрелости проекта, относящихся к одной из групп параметров проекта, осуществляется вычисление количества элементов A_M, значение которых равно 1 - (NN_TR, NN_MR, NN_ER, NN_OR, NN_SR, NN_CR), и осуществляется вычисление общего количества полученных элементов A_M - (N_TR, N_MR, N_ER, N_OR, N_SR, N_CR); осуществляется вычисление значений K_TR, K_MR, K_ER, K_OR, K_SR, K_CR как результата деления NN_TR, NN_MR, NN_ER, NN_OR, NN_SR, NN_CR на N_TR, N_MR, N_ER, N_OR, N_SR, N_CR соответственно.

В одном из частных вариантов реализации начальные и конечные значения оцениваемых параметров и критериев уровня зрелости проекта формируются текущего уровня зрелости и из данных проекта, содержащихся в конкурсных заявках, пояснительных записках и справках проекта.

В одном из частных вариантов реализации осуществляется формирование дополнительного набора оцениваемых атрибутов, устанавливаемых органом управления для проекта или группы проектов для изменения шаблонов проектов или экспертом для оценки проекта для изменения анкеты.

В одном из частных вариантов реализации при проведении экспертной оценки качества представленных исполнителем свидетельств о полученных в ходе выполнения проекта результатах, используются данные проекта, при этом осуществляется изменение экспертной анкеты посредством изменения или расширения базового перечня состояний уровня зрелости, базового перечня задач, базового перечня работ, базового перечня свидетельств получения результатов работ, а также базового перечня документов, в которых должны содержаться свидетельства.

В одном из частных вариантов реализации добавляются для измененных или добавленных в перечень результатов работ значения величин, характеризующих веса каждого из свидетельств для принятия утвердительного решения о выполнении работ с требуемым качеством.

В одном из частных вариантов реализации оценка качества фактов, извлеченных из оцениваемых документов, включает оценку качества фактов о полученных в ходе выполнения проекта результатов в формате анкеты.

В одном из частных вариантов реализации осуществляется предъявление результатов обработки результатов расчетов по проекту в одном из известных форматов предъявления данных пользователю, включающих результаты ранжирования проектов, индексы зрелости проектов, динамики изменения индекса зрелости проекта в том числе в сравнении с прогнозируемой, характеризующую полноту проекта степень выполнения работ, ассоциированных с параметрами проекта TR, MR, ER, OR, SR, CR.

В одном из частных вариантов реализации осуществляется формирование набора рекомендаций исполнителям проектов, причем если в ходе упомянутой обработки было установлено, что развитие проекта отстает от плановых показателей, то формируются рекомендации исполнителям проектов, направленные на повышение эффективности выполняемых ими работ, содержащие рассчитанные количественные значения оцениваемых критериев зрелости проекта.

В одном из частных вариантов реализации если значение TPML_L не равно значению L, то повторяется вычисление скорректированного вектора достигнутых состояний уровня зрелости проекта, а если значение TPML_L равно значению L, то устанавливается факт совпадения плана с фактом в данный момент времени.

В одном из частных вариантов реализации если значение индекса зрелости проекта I_M меньше прогнозного значения индекса зрелости проекта I_план, то осуществляется выработка управленческих решений и если значение индекса зрелости проекта I_M больше либо равно прогнозного значения индекса зрелости проекта I_план, то устанавливается факт нормального развития проекта.

В одном из частных вариантов реализации индекс зрелости проекта I_M определяется по формуле I_M=TPML_L - 1 + NN /N, где N - размерность вектора S, и значение индекса зрелости проекта I_M определяет динамику выполнения проекта на различных временных интервалах выполнения проекта в пределах одного уровня зрелости проекта, и, если, его значение совпадает или превышает прогнозное значение в определенный момент времени выполнения проекта, установленное в документах на выполнение проекта, то устанавливается факт, что проект выполняется в соответствии с установленными требованиями и не требует принятия мер оперативного реагирования.

В одном из частных вариантов реализации если значение какого-либо из критериев K_TR, K_MR, K_ER, K_OR, K_SR, K_CR, определяющих полноту выполнения работ по проекту, ассоциированных с соответствующей группой параметров проекта и описывающих в совокупности сбалансированное развитие проекта: работ, направленных на достижение технологической готовности (TR), производственной готовности (MR), инженерной готовности (ER), готовности организационного обеспечения проекта (OR), работ по обеспечению преимуществ проекта и сглаживанию рисков проекта (SR), работ по определению рыночной готовности и коммерциализации результатов проекта (CR), меньше единицы, то работы, ассоциированные с соответствующим параметром считаются не выполненными, так что необходимо принять меры оперативного вмешательства в ход выполнения проекта, с предъявлением данного факта пользователю, и если значение критерия какого-либо из критериев K_TR, K_MR, K_ER, K_OR, K_SR, K_CR не превышает заранее заданного критериального значения, то у проекта существует значительный риск его невыполнения, что является основанием для принятия решения на прекращение выполнения проекта.

В одном из частных вариантов реализации осуществляют: формирование массива данных параметров, идентифицирующих и характеризующих уровни зрелости проектов базовый перечень показателей, базовый перечень задач, базовый перечень работ, базовый перечень результатов работ, базовый перечень документов, и ввод их в блок памяти компьютерно-реализуемой системы, подключение к базе данных системы мониторинга за ходом выполнения проекта по проводным или беспроводным каналам связи и импорт из нее документов проекта для последующей оценки состояния проекта, подготовка и ввод в компьютерно-реализуемую систему прогнозных (планируемых) значений оцениваемых параметров - уровень зрелости проекта, индекс зрелости проекта, с указанием моментов времени, в которые должно быть установлено выполнения прогноза, экспертное оценивание качества свидетельств, представленных исполнителем проекта в документах по проекту и ввод полученных оценок в компьютерно-реализуемую систему, при этом полученной оценке соответствует определяемое экспертом численное значение степени уверенности, с которой можно утверждать, что свидетельство подтверждает наличие в материалах проектах результата, для описания которого оно представлено исполнителем проекта в составе документации по проекту; обработку массива данных по соответствующим критериям с последующей оценкой результата обработки по каждому критерию с присвоением значения из заданного интервала значений.

Согласно другому варианту реализации, предлагается система, содержащая в себе, по крайней мере, одно вычислительное устройство, которое выполнено с возможностью исполнять способ по любому из предыдущих пунктов.

КРАТКОЕ ОПИСАНИЕ ГРАФИЧЕСКИХ МАТЕРИАЛОВ

ФИГ. 1 иллюстрирует примерный вариант структурной схемы системы, реализующей описываемое изобретение;

ФИГ. 2 иллюстрирует примерный вариант осуществления настоящего изобретения;

ФИГ. 3 иллюстрирует примерный вариант расчета значения уровня зрелости проекта TPML (от англ. ТРМ Level, Technology Project Maturity Level - уровень зрелости проекта);

ФИГ. 4 иллюстрирует примерный вариант вычисления вектора достигнутых состояний уровня зрелости;

ФИГ. 5 иллюстрирует примерный вариант вычисления значения индекса зрелости проекта;

ФИГ. 6 иллюстрирует примерный вариант вычисления значения показателя Т задачи;

ФИГ. 7 иллюстрирует примерный вариант вычисления значений K_TR, K_MR, K_ER, K_OR, K_SR, K_CR, в частности, показан примерный вариант вычисления (определения) полноты выполнения работ по проекту, описывающих в совокупности сбалансированное развитие проекта: работ, направленных на достижение технологической готовности (TR), производственной готовности (MR), инженерной готовности (ER), готовности организационного обеспечения проекта (OR), работ по обеспечению преимуществ проекта и сглаживанию рисков проекта (SR), работ по определению рыночной готовности и коммерциализации результатов проекта (CR), на определенном уровне зрелости в момент проведения оценки уровня зрелости проекта;

ФИГ. 8 иллюстрирует примерный вариант визуализации данных для критериев K_TR, K_MR, K_ER, K_OR, K_SR, K_CR, определяющих полноту выполнения работ по проекту в момент проведения оценки уровня зрелости проекта для контрольных точек на «экваторе» проекта и в его конце.

ОПИСАНИЕ ВАРИАНТОВ ОСУЩЕСТВЛЕНИЯ ИЗОБРЕТЕНИЯ

Объекты и признаки настоящего изобретения, способы для достижения этих объектов и признаков станут очевидными посредством отсылки к примерным вариантам осуществления. Однако настоящее изобретение не ограничивается примерными вариантами осуществления, раскрытыми ниже, оно может воплощаться в различных видах. Сущность, приведенная в описании, является ничем иным, как конкретными деталями, обеспеченными для помощи специалисту в области техники в исчерпывающем понимании изобретения, и настоящее изобретение определяется только в объеме приложенной формулы.

В настоящем изобретении использована указанная ниже терминология.

Научно-технологический проект - это комплекс работ, включающий исследования, направленные на применение новых знаний для достижения практических целей и решения конкретных задач с целью создания новых типов (видов) продукции и технологий, деятельность, которая направлена на создание новых материалов, продуктов, процессов, устройств, услуг, систем или методов и их дальнейшее совершенствование, а также планы и мероприятия по дальнейшему внедрению (промышленному освоению) полученных результатов.

Технология - способ преобразования вещества, энергии, информации в процессе изготовления продукции, обработки и переработки материалов, сборки готовых изделий, контроля качества, управления.

Technology Project Maturity (ТРМ) - система комплексной оценки текущего состояния или готовности научно-технологического проекта для широкого круга дисциплин на основе использования набора параметров наилучшим образом характеризующих сбалансированное развитие проекта и расширяющая стандартные возможности методов TRA (Technology Readiness Achievement) и TRL за счет использования унифицированной шкалы уровней технологической готовности проекта, научно обоснованного набора параметров и показателей проекта, а также специальных методов их обработки.

Шкала уровней зрелости проекта перечень стадий (состояний) и этапов выполняемого научно-технологического проекта от сформулированной идеи до организации серийного производства. Шкала уровней зрелости проекта характеризуется уровнями от единицы («1») до девяти («9»).

Уровень зрелости проекта (ТРМ Level, TPML) - характеристика соответствия набора параметров проекта, определяющих сбалансированное развитие проекта, и определяющая степень готовности получаемых в проекте результатов к коммерциализации, определенной стадии (состоянию) или этапу его выполнения, определяемой по шкале уровней зрелости проекта. Описание уровней TPML приведены в таблицах 1-5, которые, а также указанные в них шкалы, в частном случае являются одной из особенностей предлагаемого изобретения и не были замечены до настоящего времени ни в одной отрасли науки и техники.

Состояние уровня зрелости проекта характеристика, определяющая этапы развития научно-технологического проекта в пределах одного уровня зрелости.

Матрица взаимосвязи система взаимосвязи стадий (состояний) или этапов определенного уровня зрелости проекта, построенная на основе анализа требований нормативных документов к выполнению проекта по разработке инновационной продукции (ГОСТ, ОСТ, ТУ и т.п.), и выраженная в математической форме. Например, анализ результатов экспериментальных испытаний макета образца не может быть выполнен ранее, чем макет образца изготовлен.

Индекс зрелости проекта (I_M) характеристика динамики развития проекта на малых временных интервалах. Представляется в виде дробного числа от нуля («0») до девяти «9») и применяется при ранжировании проектов.

Динамика развития научно-технологического проекта - интервал изменения индекса зрелости проекта от его старта до завершения выполнения.

Технологическая готовность (TR) проекта параметр, описывающий степень готовности продукта от макета до промышленного образца и готового изделия; степень полноты его тестирования - от демонстрация базовых характеристик в лабораторных условиях до демонстрации полного набора характеристик в реальных условиях в составе конечного продукта; метод изготовления - от лабораторного до промышленного; и т.п.

Производственная готовность (MR) проекта - параметр, описывающий степень готовности ресурсов для экономичного производства: оборудование, совместимость технологических процессов, сертификация сырья, готовность специалистов, либо партнеров по производству; отбор технологий изготовления исходя из конкурентной цены; отработку модели себестоимости; бережливое производство; систему контроля качества производства и т.п.

Инженерная готовность (ER) проекта - параметр, описывающий степень инженерного согласования, совместимость продукта для конечного применения; доступность инженерной поддержки, применение систем CAD/CAE/CAM (CAD - Computer Aided Design аналог САПР, CAE - Computer Aided Engineering, CAM - Computer-Aided Manufacturing) для разработки компонентов, оценку эффектов сертификации и масштабирования; готовность технической документация; демонстрацию технологии изготовления т.п.

Готовность организационного обеспечения проекта (OR) - параметр, описывающий готовность проектной команды и организации-исполнителя проекта: организационно-правовая форма, система управления; бизнес-модель, которая уточняется по мере готовности продукта; доступность бюджетов, необходимых для выполнения работ на следующем уровне; соглашения с партнерами: письма, договоры и т.п.

Преимущества проекта и сглаживание рисков проекта (SR) параметр, описывающий процессы сертификации и соответствия стандартам: индустриальным, экологическим, безопасности и др.; риски на основных площадках производства и рынках сбыта и план мероприятий по их снижению; стратегию защиты интеллектуальной собственности и ее реализацию и т.п.

Рыночная готовность проекта (CR) - параметр, описывающий конкурентные преимущества; модели ценообразования; потребительские сектора; готовность команды: состав, компетенции, корпоративный договор, передача прав на интеллектуальную собственность; систему мотивации и т.п.

Оценку зрелости научно-технологических проектов проводят по следующим критериям:

- соответствие рассчитанного на основе оценки полученных результатов, определенных требованиями контракта или соглашения на выполнение проекта, значения текущего уровня зрелости проекта планируемому (прогнозному) значению;

- индекс зрелости проекта (I_M) и сравнение его рассчитанного значения с запланированным (прогнозным) значением;

- критерии K_TR, K_MR, K_ER, K_OR, K_SR, K_CR, определяющие полноту выполнения работ по проекту, описывающих в совокупности сбалансированное развитие проекта: работ, направленных на достижение технологической готовности (TR), производственной готовности (MR), инженерной готовности (ER), готовности организационного обеспечения проекта (OR), работ по обеспечению преимуществ проекта и сглаживанию рисков проекта (SR), работ по определению рыночной готовности и коммерциализации результатов проекта (CR), на определенном уровне зрелости в момент проведения оценки уровня зрелости проекта.

Система, примерный вариант которой показан на ФИГ. 1, включает вычислительное устройство пользователя (терминальное устройство пользователя) 19, которое является компьютером, например, персональным компьютером, сервером, мобильным вычислительным устройством пользователя, в частности, мобильным телефоном, смартфоном, планшетным компьютером, и т.д.

Вычислительное устройство пользователя 19 включает блок обработки данных (блок аналитической обработки данных) 29, блок памяти 37, включающий базу данных (БД) экспертных анкет и заключений 31, базу данных результатов оценки состояния проектов 33, базу данных документов проекта 35, а также включает блоки ввода и вывода, в частности, блок вывода (блок вывода результатов аналитической обработки) 23 и блок ввода 24, причем блок ввода 24 включает модуль ввода данных о научно-технологическом проекте (документы, параметры, идентифицирующие проект) 25 и модуль ввода данных экспертной оценки качества фактов и новых атрибутов, расширяющих базовые наборы для конкретного проекта (при необходимости редактирование базового набора) 27. В частном случае упомянутый блок памяти 37 может включать базу данных системы мониторинга научно-технологических проектов 13, или база данных системы мониторинга научно-технологических проектов 13 может быть связана с вычислительным устройством пользователя 19 через сеть Интернет с использованием модуля связи, в частности, сетевого адаптера 21 вычислительного устройства пользователя 19.

Блок вывода (результатов аналитической обработки) 23 и блок ввода 24 связан, по крайней мере, с блоком обработки данных 29 и сетевым адаптером 21, причем с использованием блока ввода 24 и блока вывода 23 осуществляется взаимодействие, по крайней мере, одного оператора 11 и/или, по крайней мере, одного эксперта 15 с системой, примерный вариант которой приведен на ФИГ. 1. Также, с использованием блока ввода 24 и блока вывода 23 осуществляется передача данных (через проводные и/или беспроводные линии связи) с внешними базами данных, например, базой данных системы мониторинга научно-технологических проектов 13, в частности, мониторинга за ходом выполнения проектов. Такая база данных системы мониторинга научно-технологических проектов 13 может содержать (хранить) документы, например, представляемые исполнителями проектов в органы управления во время отбора проектов, а также в ходе их выполнения.

С использованием блока ввода 24 экспертом 15 осуществляется ввод в описываемую систему результатов экспертной оценки качества сведений (фактов), извлеченных экспертом 15 из документов, представленных исполнителем проекта и содержащих описания полученных им результатов, причем при необходимости для конкретного проекта набор атрибутов, которые используются при оценке соответствия проекта определенному уровню зрелости TPML может быть расширен или отредактирован экспертом 15 для оценки рассматриваемого проекта в форме экспертной анкеты; параметров, идентифицирующих проект, в том числе количественное значение оцениваемых характеристик в начале выполнения проекта и прогнозное значение оцениваемых характеристик в конце выполнения проекта, а также прогнозное (планируемое, прогнозируемое) распределение оцениваемых характеристик по временной шкале выполнения проекта с указанием контрольных точек для проведения оценки состояния проекта (в частности, такой подход является расширением широко известного метода WBS, т.к. определяет не только результаты, которые должны быть получены в определенный момент времени, но и устанавливает перечень работ, которые необходимо выполнить к данному моменту времени); документов, содержащих описания полученных результатов выполнения работ по проекту). Касательно упомянутых атрибутов: у каждого проекта существует определенный набор работ, получаемых результатов и т.п. и т.д. Чтобы установить факт того, что нужные работы выполнены, результаты получены и т.д. и т.п., эксперт отвечает на вопросы (один, несколько, много и т.д.) экспертной анкеты, причем вопросы могут быть заданы любые в отношении любого объекта экспертизы. Так, например, чтобы установить, что проведено эскизное проектирование, эксперту могут быть заданы такие вопросы, как например: Есть ли документы? Соответствуют ли они ГОСТ по форме. Соответствуют ли они ГОСТ по содержанию? Например, на все эти вопросы эксперт ответил утвердительно. В ГОСТ сказано, что комплектность документов и их внутренне содержание ТЗ (технического задания) устанавливается исполнителем, исходя из его представлений о достаточности и необходимости указываемых в нем данных. В случае необходимости появления (например, создания) какого-либо документа из разряда необязательных, для доказательства достижения результата (определенного, какого-либо, одного из) требуется наличие такого документа и требуется его проверка экспертом, причем для проверки может быть указано (в частности, задано, в том числе заранее задано) количество фактов подтверждения, в частности, в произвольном количестве (необходимом для подтверждения). В данном примерном случае атрибутом является совокупность упомянутых фактов и документов, причем в отношении них устанавливаются (задаются) критерии проверки, как по количеству, так и по степени их влияния для установления факта - выполнена или нет работа и получен ли требуемый результат.

Также, для каждого результата может быть установлен ряд характеристик, которые должны быть у него проверены, причем необходима дополнительная проверка (например, в соответствии с решением эксперта) дополнительных сущностей, например, дополнительных характеристик (в том числе документов и т.д.), причем осуществляется добавление таких сущностей для проверки, например, в анкету, в частности, в соответствии с правилами создания анкеты. Такие (в частном случае, все) информационные атрибуты (показатели) с их значениями весовых коэффициентов (для существующей системы) уже находятся в предлагаемой системе, в частности, в блоке 31, но для конкретного проекта они могут быть изменены, так что, в частном случае, обеспечивается гибкость настройки и широта областей применения настоящего изобретения. Таким образом, в частном случае, атрибутами являются те информационные объекты, которые могут быть изменены (в описываемой системе), например, показатели уровня, перечень задач, перечень работ, перечень результатов, перечень документов, перечень фактов, вероятности и т.д.

Так, вводимые экспертом 15 или оператором 11 данные, в частности, с использованием, по крайней мере, одного устройства ввода, например, клавиатуры, передаются в модуль ввода данных о научно-технологическом проекте 25 и далее передаются в блок обработки данных 29, а также могут быть переданы в БД системы мониторинга научно-технологических проектов 13.

Так, вводимые экспертом 15 данные передаются в модуль ввода данных экспертной оценки качества фактов и новых атрибутов, расширяющих базовые наборы для конкретного проекта 27 и далее передаются в блок обработки данных 29, а также, в частном случае, могут быть переданы в БД системы мониторинга научно-технологических проектов 13.

Упомянутый блок вывода 23 осуществляет вывод данных в формате, удобном для восприятия оператором (например, в графическом, табличном и/или текстовом форматах) 11, а также осуществляется другие операции по выводу данных из описываемой системы, в том числе осуществляется предъявление рекомендаций исполнителям проектов, которые также передаются в БД системы мониторинга научно-технологических проектов 13.

Блок памяти 37 содержит БД экспертных анкет и заключений 31, БД результатов оценки состояния проектов 33, БД документов проекта 35, в которых хранятся шаблоны экспертных анкет, построенные на основе использования стадий (состояний) оцениваемого уровня зрелости TPML, базового перечня задач, которые должны быть решены для достижения состояний уровня зрелости, базового перечня работ, которые должны быть выполнены для решения определенных задач, базового перечня результатов, получаемых в определенных работах, и содержащего значения весов, устанавливаемых для свидетельств, подтверждающих получение результатов выполнения работ, базового набора документов (с требованиям к ним как по оформлению, так и по содержанию), в которых исполнитель проекта должен представить описания (факты) полученных результатов для подтверждения решения задач и достижения показателей уровня зрелости проекта; информацию о документах (или документы) по проекту, полученную в результате обработки поисковых запросов внешними базами данных и т.д.

Так, в БД экспертных анкет и заключений 31 могут храниться упомянутые шаблоны, адаптированные под проект анкеты, оценки эксперта и т.д., в БД результатов оценки состояния проектов 33 могут храниться результаты оценки состояния проектов, а в БД документов проекта 35 хранятся упомянутые документы, по крайней мере, одного проекта.

Блок памяти 37 связан с блоком обработки данных 29, в частности, в упомянутые базы данных осуществляется сохранение соответствующих данных, полученных из блока ввода 24 и/или являющихся результатом обработки блоком обработки данных 29, а также осуществляется передача данных из соответствующих данных по запросу от блока обработки данных 29. Так, блок обработки данных 29 взаимодействует с базами данных блока памяти 37 (и базой данных системы мониторинга научно-технологических проектов), блоком ввода 24 и блоком вывода 23 и осуществляет обработку информации из баз данных и сохраняет в базе данных, в частности, в базе данных результатов оценки состояния проектов 33 результаты обработки, в частности, анализа (оценки). Координация действий компонентов описываемой системы осуществляется процессором описываемой системы, реализующим алгоритмы, в частности, осуществляющим описанные новшества в виде исполняемых команд.

С использованием проводных и/или беспроводных линий вычислительное устройство пользователя 19 осуществляет связь с, по крайней мере, одной базой данных системы мониторинга научно-технологических проектов 13, в которые вычислительным устройством пользователя 19 осуществляется передача поисковых запросов, относящихся к конкретному проекту, а также, после получения результатов обработки запросов, сохраняет, по крайней мере, в одной базе данных блока памяти 37 для дальнейшей программной обработки, а также передает (в частности, экспортирует) в вышеуказанную базу данных системы мониторинга научно-технологических проектов 13 сведения, необходимые и используемые для коррекции (в том числе в автоматическом режиме средствами описываемой системы, например, блоком обработки данных 29, в частности, модулем корректировки) планов работ исполнителями проектов в случае отставания динамики развития проекта от планируемой, в том числе с дальнейшим их предъявления пользователям. Упомянутые запросы передаются (в том числе, по идентификатору проекта), по крайней мере, в одну базу данных, за документами, которые будут обработаны (в частности, рассмотрены), например, экспертом, в частности, перечень документов и сами документы. Упомянутые сведения, необходимые и используемые для коррекции, могут использоваться в органе управления, например, для создания (составления) дополнительного соглашения к контракту для изменения плана-графика работ, или для внесения необходимых изменений, например, в свои системы управления проектами, в частности исполнителями.

На ФИГ. 2 показан примерный вариант осуществления настоящего изобретения.

В шаге 52 осуществляется подготовка (например, в автоматическом режиме средствами описываемой системы и/или оператором 11) массива информации, идентифицирующей и характеризующей уровни зрелости проектов, в частности, базовый перечень состояний (стадий), базовый перечень задач, базовый перечень работ, базовый перечень фактов (свидетельств), подтверждающих получение результатов работ с требуемым качеством. Так, оператор с использованием устройства ввода осуществляет ввод в систему упомянутых параметров, идентифицирующих и характеризующих уровни зрелости проектов. Также, осуществляется подготовка массива информации, содержащего значения величин W(E_U) характеризующие веса (вклад) каждого из свидетельств для принятия решения о том, что работа выполнена в полном объеме с требуемым качеством. Эти величины в том числе характеризуют относительную важность каждого из оцениваемых свидетельство по сравнению с другими свидетельствами. Так, например, упомянутый подготавливаемый массив информации (на уровне TPML5) может включать следующие данные:

- Состояние 1 - На основе анализа испытаний модели составлено задание на экспериментальный образец (ЭО) в масштабе близком к реальному;

- Задача 1.2 - Составить техническое задание на экспериментальный образец в масштабе близком к реальному;

- Работа 1.2.3 - Определить цели, задачи, функции экспериментального образца;

- Результат 1.2.3.1 - Определены цели создания ЭО;

- Свидетельства -

-1.2.3.1.1. Имеется документ ТЗ;

-1.2.3.1.2. Такой документ содержит раздел «Цели создания экспериментального образца»;

-1.2.3.1.3. Содержание раздела «Цели создания экспериментального образца» соответствует требованиям ГОСТ.

Вес (Свидетельство 1.2.3.1.1)=0,25.

Вес (Свидетельство 1.2.3.1.2)=0,25.

Вес (Свидетельство 1.2.3.1.3)=0,85.

С использованием упомянутых базовых перечней подготавливаются шаблоны экспертных анкет, в автоматическом режиме и/или оператором с использованием информационных объектов и весовых коэффициентов, сохраняемых, по крайней мере, в одну базу данных, например, в (соответствующие) таблицы баз(ы) данных. Сформированные массивы информации вводятся в систему и передаются в блок памяти 37 для сохранения и использования (в частности, для обработки), в том числе, по крайней мере, блоком обработки данных 29, в частности для автоматизированного расчета (уровня зрелости TPML, состояний уровня зрелости, результатов выполнения работ, полноты достижения частичных уровней готовности и т.д.), как описано в рамках настоящего изобретения. В частном случае осуществляется подготовка шаблона (средствами описываемой системы, с использованием средств описываемой системы, например, оператором, и т.д.) базовых наборов, который может быть использован экспертом, средствами описываемой системы, причем шаблон может быть отредактирован, например, по крайней мере, одним пользователем, например, экспертом, или в автоматическом режиме. После заполнения (экспертом) анкеты описываемая система осуществляет, обработку, по крайней мере, данных, содержащихся в анкете в автоматическом режиме.

В шаге 56 осуществляется установление связи между БД системы мониторинга научно-технологических проектов (БД информации системы мониторинга за ходом выполнения проекта) 13 и вычислительным устройством пользователя 19 и осуществляется импорт документов проекта для оценки текущего состояния проекта, в частности, модулем связи, в частном случае, являющимся сетевым адаптером 21, в частности, запрашиваются сами документы, в том числе для обработки экспертом (эксперт должен посмотреть, проверить и т.д. такие документы), в процессе мониторинга (например, системой мониторинга) и т.д., причем импорт документов проекта осуществляется из БД системы мониторинга научно-технологических проектов 13 в базу документов проекта 35.

В шаге 60 с использованием извлеченной (средствами описываемой системы и/или оператором, в том числе на основе плана-графика, содержащегося в контракте) из документов по проекту информации осуществляется установка (задание) начальных и конечных значений оцениваемых параметров и критериев уровня зрелости проекта, временной шкалы с расположенными на ней контрольными точками и прогнозируемыми значениями индекса зрелости проекта, в частности, заданных при первоначальной настройке проекта, например, оператором, а также прогноз их изменения по времени выполнения проекта (аналог WBS), в частности, до начала выполнения проекта. Ввод в систему таких параметров, идентифицирующих и характеризующих конкретный научно-технологический проект, также осуществляется оператором 11 с использованием устройств ввода через блок ввода 24. Так, при заключении контрактов на НИР (научно-исследовательскую работу), ОКР (опытно-конструкторские работы) осуществляется обработка (оператором и/или средствами описываемой системы) запланированных в плане-графике работ, сопоставление их с показателями уровня зрелости, задачами и работами, содержащимися в нем, и осуществляется составление плана, содержащего упомянутую извлеченную информацию. В частном случае, заключение контракта и составление плана-графика уже связано со шкалой TPML (привязано к шкале TPML), причем в данном случае может быть исключен процесс упомянутого сопоставления. Применительно к начальным и конечным значениям оцениваемых параметров и критериев уровня зрелости проекта, в частном случае, осуществляется обработка конкурсных заявок (например, органами управления или уполномоченными ими организациями в том числе с использованием средств описываемой системы и/или средствами описываемой системы), осуществляется оценка (в том числе экспресс-оценка) текущего уровня зрелости, осуществляется обработка пояснительных записок, справок и т.д. Далее осуществляется использование полученных в результате обработки данных для проведения оценки заявки в описываемой системе. Далее, для условия (заданного условия, т.е. при предположении того факта), что все, что хотят сделать исполнители, сделано, причем успешно, осуществляется обработка ТЗ (данных, содержащихся в ТЗ), плане-графике и осуществляется повторная проверка того же проекта в описываемой системе. Таким образом, в частном случае, осуществляется определение двух значений уровня зрелости на входе и выходе. Далее осуществляется (например, органом управления) проверка данных на входе. Если значение уровня зрелости проекта на входе мало, то такая заявка не может стать победителем конкурса. В частности, упомянутый задаваемый (устанавливаемый) прогноз является расчетом того, что должно быть по временной шкале. В частности, (любой) план является прогнозом, который либо оправдывается, либо нет.

В шаге 64 осуществляется оценка качества фактов, извлеченных из оцениваемых документов, и осуществляется ввод в описываемую систему значений оценки фактов, и ввод при необходимости в дополнение к базовому дополнительного набора оцениваемых необходимых атрибутов, причем оценка может осуществляться экспертом 15 и/или в автоматизированном режиме средствами описываемой системы, например, блоком обработки данных 29 или модулем блока обработки данных, например, модулем экспертной оценки. Упомянутым базовым набором является набор, который был создан (составлен), например, на основе обработки (изучения) ГОСТ, определяющих порядок и этапы выполнения работ (например, ГОСТ СРПП) практик выполнения инновационных проектов в разных институтах развития и т.д. Упомянутым дополнительным набором является набор, который либо устанавливается органом управления для конкретного проекта (группы проектов), что означает изменение (и требует изменения) шаблона для этих проектов, либо экспертом для оценки конкретного проекта - т.е. меняется конкретная анкета.

Для оценки свидетельств, подтверждающих получение результатов, используются документы, представляемые исполнителями проектов в определенные моменты времени в органы управления исполняемого проекта. Эти документы вносятся (в частности, передаются) в систему после подключения к БД системы мониторинга научно-технологических проектов 13 и импорта документов проекта для оценки текущего состояния проекта в шаге 56.

Документы по проекту, полученные из БД системы мониторинга научно-технологических проектов 13, используются при проведении экспертной оценки (в автоматическом или полуавтоматическом режиме, в том числе экспертом 15) качества представленных исполнителем свидетельств о полученных в ходе выполнения проекта результатах, при этом, с учетом специфики рассматриваемого проекта, при подготовке экспертного заключения экспертная анкета может быть модифицирована (в том числе экспертом 15) путем изменения или расширения базового перечня состояний уровня зрелости, базового перечня задач, базового перечня работ, базового перечня свидетельств получения результатов работ, а также базового перечня документов, в которых должны содержаться свидетельства. Так, добавляются (в частности, указываются) для измененных или добавленных в перечень результатов работ значения величин W(E_U), характеризующих веса (вклад) каждого из свидетельств для принятия утвердительного решения о выполнении работ с требуемым качеством. Модифицированная анкета сохраняется в блоке памяти 37, по крайней мере, в одной базе данных, например, в БД экспертных анкет и заключений 31. Упомянутое модифицирование экспертной анкеты, в частном случае, обеспечивает гибкость настройки инструмента и расширение областей его применения для оценки проектов в различных областях науки и техники.

Далее, в шаге 68, в том числе после добавления данных экспертной оценки качества представленных фактов о полученных в ходе выполнения проекта результатов в форме экспертной анкеты, средствами описываемой системы, в частности, блоком обработки данных 29, средствами описываемой системы, например, блоком обработки данных 29, осуществляется автоматическое вычисление критериев оценки зрелости научно-технологического проекта, которые подвергаются аналитической обработке и передаются в блок вывода (блок вывода информации, блок вывода результатов аналитической обработки, блок предъявления материалов) 23.

В шаге 72 осуществляется вывод результатов аналитической обработки результатов расчетов по проекту (проектам) в одном из известных форматов предъявления данных (информации) пользователям (в том числе оператору 11 и эксперту 15), например, в табличной и графической формам с использованием средств описываемой системы, в частности, с использованием блока вывода (блока отчетности и визуализации результатов) 23. Так, осуществляется предъявление пользователю, например, оператору (эксперту и т.д.), в частности, осуществляется вывод, результатов ранжирования проектов, индекса (индексов) зрелости проектов, динамики изменения индекса зрелости проекта в том числе в сравнении с прогнозируемой, степень выполнения (полнота) работ, ассоциированных с параметрами проекта TR, MR, ER, OR, SR, CR.

Также, блоком обработки данных 29 осуществляется формирование набора рекомендаций исполнителям проектов, которые также предъявляются пользователям блоком вывода 23 с использованием одного из известных устройств предъявления информации, например, с использованием монитора.

Если в ходе упомянутой обработки было установлено, что развитие проекта отстает от плановых показателей, то средствами системы, в том числе блоком обработки данных 29, а также опционально экспертом 15, подготавливаются рекомендации исполнителям проектов, направленные на повышение эффективности выполняемых ими работ. Эти рекомендации, содержащие в том числе рассчитанные количественные значения оцениваемых критериев зрелости проекта, через установленное подключение к БД системы мониторинга научно-технологических проектов 13 передаются (экспортируются) в соответствующие разделы вышеупомянутой БД системы мониторинга научно-технологических проектов 13 и, впоследствии, предъявляются исполнителям проектов, в частности, доводятся до исполнителей проектов установленными в упомянутой системе мониторинга способами или блоком вывода 23.

Также средствами описываемой системы, например, блоком обработки данных 29, может осуществляться построение рейтинга из нескольких оцениваемых проектов по количественному значению индексов их зрелости в баллах, в качестве дополнительной функции описываемой системы. Упомянутое построение рейтинга из нескольких оцениваемых проектов по количественному значению индексов их зрелости в баллах может осуществляться, например, посредством создания таблицы проектов, в частности, выполняющихся проектов, каждому проставляется значение индекса, после чего осуществляется сортировка проектов по значениям индексов, например, в порядке убывания индекса, результатом чего является рейтинг, который может быть передан в орган управления для анализа (и обработки), причем в результате сортировки может быть найден, по крайней мере, проект (как минимум один) с минимальным индексом и проект (как минимум один) с максимальным индексом.

На ФИГ. 3 показан примерный вариант расчета значения уровня зрелости проекта TPML.

Для расчета значения текущего уровня зрелости проекта TPML используется модель, построенная на основе декомпозиции процесса выполнения проекта как системы состояний, задач, работ и свидетельств получения результатов работ в процессе выполнения проекта, причем декомпозиция процесса выполнения проекта осуществляется на основе требований нормативных документов и стандартов. В данной модели каждому уровню зрелости L (от англ. Level) проекта соответствует определенный набор состояний (от англ. stage, state) и соответствующие им количественные значения L|S={S_I, I=1,2, …N_L}, причем значения S_I равны единице («1»), если состояния достигнуты, и нулю («0»), если нет. Для достижения указанных состояний исполнителями проекта должны быть решены соответствующие задачи (от англ. Task), которым также ставятся в соответствие количественные значения, в частности для показателя S_I|T={T_J, J=1,2, …, N_SI}, причем значения T_J равны единице («1»), если соответствующая задача решена, и нулю («0»), если нет. Каждая задача разбивается на ряд работ (от англ. Act), направленных на достижение соответствующей готовности проекта - TR, MR, ER, OR, SR, CR, которым также ставятся в соответствие количественные значения, в частности для задачи T_J|A={A_M, М=1,2, …, N_TJ}, причем значения A_M равны единице («1»), если работа выполнена, и нулю («0»), если нет. Итогом выполнения этих работ являются конкретные результаты, которым также ставятся в соответствие количественные значения, в частности для работы A_M|Е={E_U, U=1,2, …, N_AM}. Доказательства получения результатов - описания, свидетельства, факты - E_U (от англ. Evidence), в свою очередь, представляются исполнителями проекта в составе отчетной документации о ходе выполнения проекта. Значениям E_U также ставятся в соответствие количественные величины. Эти сведения о полученных результатах в рамках модели являются набором оцениваемых свидетельств. Значение этой характеристики E_U зависит от того, каково качество содержащихся в проектной документации (D - от англ. Document) E_U|D={D_Y, Y=1,2, …, N_EU} подтверждающих сведений об этом свидетельстве.

Каждое из представленных исполнителями проекта свидетельств не может в полной мере позволить сделать однозначный вывод о достижении определенного результата, это может быть сделано только лишь при наличии всей совокупности подтверждающих свидетельств. В рамках предлагаемой модели каждое свидетельство E_U обладает весовым коэффициентом 0<W(E_U) ≤ 1, изначально устанавливаемым экспертным путем и имеющим следующий смысл: величина W(Eu) характеризует вклад каждого свидетельства E_U для принятия утвердительного решения о получении результата, соответствующего требуемому качеству, а также относительную важность свидетельств получения требуемых результатов. Если полученный результат соответствует установленным требованиям, то E_U=W(E_U), если же качество какого-либо из оцениваемых свидетельств не соответствует заданным требованиям, то значение E_U равно весовому коэффициенту, умноженному на поправочный коэффициент 0≤Q(E_U) ≤ 1 (от англ. Quality), E_U⁼W(E_U)*Q(E_U), в частности, если информация о свидетельстве в материалах проекта отсутствует, то значение W_U умножается на поправочный коэффициент, значение которого равно ноль («0»), а если качество представленного свидетельства удовлетворяет требованиям, то на поправочный коэффициент, значение которого равно единице («1»). В остальных случаях эксперт определяет значение поправочного коэффициента на основе личного опыта, либо на основе требований к процессу оценку, устанавливаемых органом управления. Такой подход к оценке результатов позволяет варьировать требования к их качеству для различных проектов или проводимых конкурсов по их отбору по следующему правилу, если значение величины W_A=Σ(W(E_U)*Q(E_U)) / ΣW(E_U), рассчитанной по совокупности входящих в него свидетельств будет больше некоторой пороговой величины 0<W_порог≤1, то результат может быть засчитан, и нет - в противном случае.

В используемой информационной модели уровня зрелости проекта базовый набор подтверждающих свидетельств определяется на основе обработки массива сведений о уже выполненных проектах с помощью метода экспертных оценок, причем модель допускает расширение этого базового набора на этапе проведения оценки конкретного проекта экспертом.

В шаге 80 осуществляется получение блоком обработки данных 29 из блока памяти 37 скорректированного вектора достигнутых состояний уровня зрелости проекта. Упомянутый скорректированный вектор достигнутых состояний уровня зрелости формируется автоматически средствами системы после коррекции результата расчета состояний с использованием матрицы взаимосвязи, в частности, некоторые значения, равные единице ("1") для них могут быть заменены на значения, равные нулю ("0").

В шаге 83 блоком обработки данных 29 осуществляется расчет значения уровня зрелости проекта по формуле

В шаге 86 блоком обработки данных 29 проверяется равенство значения TPML_L значению L. В случае, если значение TPML_L не равно значению L, то в шаге 86 осуществляется возврат к шагу 80. Так, например, если уровень проекта в соответствии с планом-графиком, должен иметь значение, равное четырем («4»), но в результате его оценки предлагаемой системой установлено, что это не так, то дальнейшая проверка уровня проекта будет осуществлена для уровня, равно трем («3»), чтобы удостовериться, что проект находится на уровне зрелости, равном трем («3»), и так далее, пока не будет полностью подтвержден какой-либо уровень зрелости от 1 до 4.

Ели в шаге 86 установлено, что значение TPML_L равно значению L (т.е. в данный момент времени план совпадает с фактом), то в шаге 92 осуществляется сохранение полученного значения уровня зрелости в базе данных результатов оценки состояния проектов 33 блока памяти 37. В частном случае, после получения значения TPML_L, осуществляется вычисление значений, как показано на ФИГ. 4 - ФИГ. 7.

На ФИГ. 4 показан примерный вариант вычисления вектора достигнутых состояний.

В шаге 110 осуществляется получение блоком обработки данных 29 из базы данных экспертных анкет и заключений 31 блока памяти 37 набора атрибутов, характеризующих задачи, выполняемые для достижения состояний определенного (в частности, заданного) уровня готовности проекта L, в частности для состояния S_I|T={T_J, J=1,2, …, N_SI}, полученного из данных шаблона экспертной анкеты.

Далее, в шаге 114 блоком обработки данных 29 осуществляется расчет значения достигнутого состояния уровня зрелости проекта по формуле S_I=T₁*T₂*…*T_NSI, т.е посредством перемножения значений T_J (равных нулю или единице), вычисление которых показано на ФИГ. 6.

В шаге 118 после расчета (вычисления) значений всех S_I для всех задач уровня зрелости блоком обработки данных 29 осуществляется корректировка значений координат вектора достигнутых состояний с использованием матрицы взаимосвязи.

Так, полученный вектор S корректируется с использованием матрицы взаимосвязи ММ, элементы которой определяют взаимосвязь между состояниями уровня зрелости проекта, устанавливаемую экспертным путем с использованием (на основе изучения) требований нормативных документов и иных стандартов, которые предъявляются к процессам выполнения инновационных проектов. Каждый элемент матрицы взаимосвязи устанавливается на основе правила MM_I,J=1/R, если состояние S_I связано с состоянием S_J, и 0, если нет. Значение R равно количеству всех связей состояния S_I с остальными состояниями (в том числе самим собой). Например, если состояние S₁ не может быть достигнут ранее, чем будут достигнуты состояния S₂ и S₄, то R=3, ММ_1,1=ММ_1,2=MM_1,4=1/3, а остальные элементы матрицы ММ в 1-й строке будут равны 0.

Для корректировки значения вектора состояний S он умножается справа на матрицу ММ по правилам матричного умножения. Если в итоге каждая компонента вектора S равна 1, то это означает, что текущий уровень зрелости проекта TPML в данный момент времени достигнут, а если он совпадает с прогнозным значением, которое может быть определено на основе информации, представленной в контракте или соглашении на выполнение проекта, то делается вывод, что проект выполняется в соответствии с установленными требованиями и не требует принятия мер оперативного реагирования.

В шаге 122 осуществляется сохранение полученного вектора достигнутых состояний в блоке памяти 37, в частности, в базе данных результатов оценки состояния проектов 33.

На ФИГ. 5 показан примерный вариант вычисления значения индекса зрелости проекта.

В шаге 140 осуществляется получение блоком обработки данных 29 из базы данных экспертных анкет и заключений 31 блока памяти 37 скорректированного вектора достигнутых состояний (размерность вектора N) на данном уровне зрелости проекта TPML. Скорректированный вектор является результатом автоматической коррекции с помощью матрицы взаимосвязи, описывающей связи между состояниями с точки зрения правильной последовательности решения задач для достижения уровня зрелости. Например, задача номер десять решена, а задача номер пять - нет, но задача номер десять никак не могла быть решена раньше задачи номер пять, поэтому и задача номер десять становится не решенной, что является примером упомянутой коррекции. Итогом обработки скорректированного вектора показателей уровня зрелости в блоке 140 является количество NN состояний уровня зрелости, значения которых равны единице («1»), т.е. количество достигнутых состояний за счет решения задач с требуемым качеством.

Далее, в шаге 143 блоком обработки данных 29 осуществляется расчет (вычисление) общего количества всех состояний N уровня зрелости, как достигнутых, так и не достигнутых.

В шаге 146 блоком обработки данных 29 осуществляется расчет значения индекса зрелости проекта I_M проекта по формуле I_M=TPML_L-1+NN/N.

Далее в шаге 149 блоком обработки данных 29 проверяется, значение индекса зрелости проекта 1 м больше либо равно запланированного (прогнозного)

значения индекса зрелости проекта I_план (I_M≥I_план). Если значение индекса зрелости проекта I_M меньше запланированного (прогнозного) значения индекса зрелости проекта I_план, то в шаге 155 средствами описываемой системы (например, блоком обработки данных) и/или экспертом осуществляется выработка управленческих решений и в шаге 158 осуществляется сохранение полученного значения индекса зрелости проекта в базе данных результатов оценки состояния проектов 33 блока памяти 37. Если значение индекса зрелости проекта I_M больше либо равно запланированного (прогнозного) значения индекса зрелости проекта I_план, то в шаге 152 устанавливается факт нормального развития проекта, т.е проект выполняется в соответствии с установленными в контракте или соглашении на выполнение проекта требованиями и, следовательно, не требует принятия мер оперативного реагирования и в шаге 158 осуществляется сохранение полученного значения индекса зрелости проекта в блоке памяти 37.

На ФИГ. 6 показан примерный вариант вычисления количественного значения показателя T_J задачи, характеризующий итог ее решения. Если значение T_J равно единице («1»), то это означает, что она решена, а если нулю («0»), то нет.

Задача может включать несколько обязательных работ. Если все такие обязательные работы выполнены (завершены), то показатель задачи T_J равен единице ("1"), если - нет, то - нулю ("0"), где "0" - задача не решена с требуемым качеством.

Пример обязательных работ прикладных исследований уровня зрелости «Сформулирована фундаментальная концепция технологии и обоснована полезность технологии», для которого сформулированы основные направления исследований, обоснована перспективность разрабатываемой технологии и ее востребованность, а также определена инфраструктура (принадлежность, состав) необходимая для выполнения проекта (исследования, производство и внедрение результатов), для TPML1 показан в Таблице 6. В Таблице 6 представлены базовые наборы задач и работ для состояния уровня зрелости «Проведен анализ существующих на рынке решений».

Для приведенных в таблице 6 данных количество работ, в частном случае, составляет 7, в частности, для TR - 1, для SR - 5, для CR - 1.

В шаге 171 осуществляется получение блоком обработки данных 29 из базы данных экспертных анкет и заключений 31 блока памяти 37 перечня работ T_J|A={A_M, M=1, 2, …, N_TJ}, направленных на достижение соответствующей готовности проекта - TR, MR, ER, OR, BR, CR, на определенном уровне зрелости L проекта, ассоциированных с характеристикой (показателем) T_J задачи, и перечень свидетельств о результатах их выполнения A_M|Е={E_U, U=1, 2, …, N_AM}, которые должны быть указаны в документах, представляемых исполнителем проекта для того, чтобы можно было сделать вывод, что работа выполнена.

Факты (свидетельства) Еи характеризуются весовым коэффициентом изначально устанавливаемым экспертным путем и имеющим следующий смысл: величина W(E_U) характеризует вклад каждого свидетельства Еи для принятия утвердительного решения о получении результата, соответствующего требуемому качеству, а также относительную важность свидетельств получения требуемых результатов. Если полученный результат соответствует установленным требованиям, то E_U=W(E_U), если же качество какого-либо из оцениваемых свидетельств не соответствует заданным требованиям, то значение E_U приравнивается величине W(E_U), умноженной на поправочный коэффициент 0≤Q(E_U)≤1, в частности, если информация о свидетельстве в материалах проекта отсутствует, то значение W_U умножается на поправочный коэффициент, значение которого равно ноль («0»), а если качество представленного свидетельства удовлетворяет требованиям, то поправочный коэффициент, значение которого равно единице («1»). В остальных случаях эксперт определяет значение поправочного коэффициента на основе личного опыта, либо на основе требований к процессу оценку, устанавливаемых органом управления.

В шаге 174 блоком обработки данных 29 осуществляется расчет количественного значения величины W_A по всей совокупности входящих в нее свидетельств по формуле W_A=Σ(W(E_U)*Q(E_U))/ΣW(E_U), анализ значения которого позволяет при оценке сделать вывод о том, что результат выполнения работы можно считать удовлетворяющим ранее заданным требованиям на основании сравнения этого значения с пороговой величиной, которое осуществляется в шаге 177.

В шаге 177 блоком обработки данных 29 осуществляется проверка, значение W_A больше либо равно значения W пороговой или нет W_A≥W_пopoг). Если значение W_A больше либо равно значения W пороговой, то в шаге 180 величина А_М приравнивается единице (A_M=1), что означает, что работа А_М выполнена, а если значение W_A меньше значения W пороговой, то в шаге 183 величина А_М приравнивается нулю (A_M=0), что означает, что работа А_М не выполнена. Перемножение всех значений А_М результатов выполнения работа позволяет определить, полностью ли решена задача.

Далее в шаге 186 блоком обработки данных 29 осуществляется вычисление значения T_J по формуле T_J=A₁*A₂…*A_NTJ, т.е. после определения всех значений А_М может быть рассчитана величина T_J=A₁*A₂*…*A_NTJ Нетрудно видеть, что каждый параметр T_J может принимать значения 0 или 1. Для расчета значения достигнутого состояния уровня зрелости S_I используется выражение S_I=T₁*T₂*…*T_NTJ.

Таким образом, итогом проводимых расчетов по результатам экспертной оценки проекта является вектор достигнутых состояний S, каждая компонента которого представляет из себя 1, если установлено, что состояние достигнуто, и 0, если состояние не достигнуто.

В шаге 189 блоком обработки данных 29 осуществляется сохранение полученного значения количественного значения Т задачи в базе данных результатов оценки состояния проектов 33 блока памяти 37.

На ФИГ. 7 показан примерный вариант вычисления значений K_TR, K_MR, K_ER, K_OR, K_SR, K_CR.

Так, на ФИГ. 7 показан примерный вариант определения полноты выполнения работ по проекту, описывающих в совокупности сбалансированное развитие проекта: работ, направленных на достижение технологической готовности (TR), производственной готовности (MR), инженерной готовности (ER), готовности организационного обеспечения проекта (OR), работ по обеспечению преимуществ проекта и сглаживанию рисков проекта (SR), работ по определению рыночной готовности и коммерциализации результатов проекта (CR), на определенном уровне зрелости в момент проведения оценки уровня зрелости проекта.

В шаге 201 осуществляется получение блоком обработки данных 29 из базы данных результатов оценки состояния проектов 33 блока памяти 37 значений количества работ N, ассоциированных с группами атрибутов проекта TR, MR, ER, OR, BR, CR на данном уровне зрелости проекта в блок обработки данных для определения коэффициентов K_TR, K_MR, K_ER, K_OR, K_SR, K_CR, а также значений скорректированного вектора достигнутых состояний уровня зрелости проекта.

В шаге 205 блоком обработки данных 29 осуществляется расчет значений NN_{TR,MR,ER,OR,SR,CR}, определяющих количество реально выполненных работ, рассчитанное по координатам скорректированного вектора достигнутых состояний S. Для этого сначала корректируются значения T_J по правилу: если S_I=1, то все связанные с ним T_J=1, а если S_I=0, то все связанные с ним T_J=0. Аналогично корректируются значения А_М для последующего расчета критериев K_TR, K_MR, K_ER, K_OR, K_SR, K_CR: если значение T_J=1, то все значения А_М, ассоциированные с ним устанавливаются равными 1, а если значение T_J=0, то все значения А_М, ассоциированные с ним устанавливаются равными 0.

Как описано в рамках настоящего изобретения, каждая работа направлена на получение результата, который характеризует одну из групп параметров проекта - TR, MR, ER, OR, SR, CR, т.е. имеет тип, соответствующий определенному уровню готовности. Сумма количества работ с одним и тем же типом дает требуемое значение общего количества работ данного типа, а сумма выполненных работ с этим типом позволяет оценить полноту выполнения работ.

Таким образом, для расчета критериев K_TR, K_MR, K_ER, K_OR, K_SR, K_CR, в частности, определяющих полноту выполнения работ по проекту - работ, направленных на достижение технологической готовности (TR), производственной готовности (MR), инженерной готовности (ER), готовности организационного обеспечения проекта (OR), работ по обеспечению преимуществ проекта и сглаживанию рисков проекта (SR), работ по определению рыночной готовности и коммерциализации результатов проекта (CR), из компонент скорректированного вектора А_М осуществляется, в частности, средствами, по крайней мере, одной базы данных, выбор (отбор) тех из них, которые относятся к определенной группе TR, MR, ER, OR, SBR и CR.

Далее блоком обработки данных 29, в частности для расчета полноты, осуществляется вычисление количества элементов, значение которых равно 1 - NN_{TR,MR,ER,OR,SR,CR} (идентично записи в виде NN_TR, NN_MR, NN_ER, NN_OR, NN_SR, NN_CR), и осуществляется вычисление (определение) общего количества отобранных элементов - N_{TR,MR,ER,OR,SR,CR} (идентично записи в виде N_TR, N_MR, N_ER, N_OR, N_SR, N_CR). Таким образом, осуществляется деление суммы тех (значений), что равны единице, на общее количество работ данного типа, т.о. если значение элемента равно единице, то осуществляется отбор, если ноль, то - нет, и далее вычисляется мощность полученного набора, т.е., в частности, осуществляется пересчет его элементов по порядку от единицы и далее.

В шаге 211 блоком обработки данных 29 осуществляется расчет значений K_{TR,MR,ER,OR,SR,CR} (идентично записи в виде K_TR, K_MR, K_ER, K_OR, K_SR, K_CR) по формуле K_{TR,MR,ER,OR,SR,CR}=NN_{TR,MR,ER,OR,SR,CR}/N_{TR,MR,ER,OR,SR,CR}.

В шаге 215 блоком обработки данных 29 (или, например, средствами соответствующей базы данных) осуществляется сохранение полученных (вычисленных) значений коэффициентов K_TR, K_MR, K_ER, K_OR, K_SR, K_CR (идентично записи в виде K_{TR,MR,ER,OR,SR,CR}) в базе данных результатов оценки состояния проектов 33 блока памяти 37.

Если значения какого-либо из критериев K_TR, K_MR, K_ER, K_OR, K_SR, K_CR меньше единицы («1»), то это означает, что работы, ассоциированные с соответствующей группой параметров проекта не выполнены, что означает необходимость принятия мер оперативного вмешательства в ход выполнения проекта, о чем, по крайней мере, сообщается пользователям, как описано в рамках настоящего изобретения, причем, если, в частном случае, значение критерия какого-либо из критериев K_TR, K_MR, K_ER, K_OR, K_SR, K_CR не превышает заранее заданной величины (критериального значения), в частности, установленной требованиями органами управления и мониторинга за ходом выполнения проекта на основе статистической обработки сведений о всех ранее выполненных проектах, например 0,15 (отклонение не менее чем 85%), то это означает, что у проекта существует значительный риск его невыполнения, о чем, по крайней мере, сообщается пользователям, как описано в рамках настоящего изобретения.

При оценке по описываемому способу нескольких проектов может осуществляться построение рейтинга (или ранжирования) по численному значению в баллах индекса зрелости каждого из проектов в порядке возрастания или убывания полученных значений баллов, как описано в рамках настоящего изобретения.

На ФИГ. 8 показан примерный вариант визуализации данных для критериев K_TR, K_MR, K_ER, K_OR, K_SR, K_CR - полноты выполнения работ по проекту, в момент проведения оценки уровня зрелости проекта для контрольных точек на «экваторе» проекта и в его конце.

Заявляемый способ был апробирован при оценке 90 научно-технологических проектов. Каждый проект оценивался по атрибутам, относящимся к следующими группам параметров, характеризующим его ценность: технологическая готовность (TR), промышленная готовность (MR), инженерная готовность (ER), готовность организационного обеспечения проекта (OR), преимущества и риски проекта (SR), рыночная готовность и коммерциализация (CR). Оценки проводились в трех точках временной шкалы выполнения проекта в начале выполнения проекта, посередине срока выполнения проекта и перед его завершением. Полученная совокупность количественных оценок по каждому проекту позволила построить рейтинг из оцениваемых проектов, что соответствовало степени их завершенности с точки зрения готовности их к практическому использованию, кроме того были подготовлены аналитические справки для выработки управленческих решений в отношении проектов, показатели которых заметно отличались от значений, рассчитанных после проведения конкурсных процедур в отношении исследуемых проектов.

Ниже представлен пример оценки степеней готовности по оцениваемым параметрам по одному из научно-технологических проектов по теме «Разработка и создание эффективных аппаратов-разделителей для получения кондиционной (с концентрацией 99,8%) тяжелой воды на ФГУП «ПО Маяк».

На основе изучения конкурсной заявки для этого проекта был составлен план мониторинга и оценки уровня его зрелости, причем контрольные временные точки оценки были выбраны в следующей последовательности: начало проекта «экватор» (середина) проекта (3-й этап календарного плана выполнения проекта) конец проекта (5-й этап календарного плана выполнения проекта). На основе имеющихся в системе мониторинга проектов экспертных заключений по проекту для данных точек измерений уровня зрелости данного проекта, в шаблоны экспертных анкет для оценки уровня зрелости были внесены количественные значения величин W(E_U) характеризующих вклад каждого свидетельства E_U для принятия утвердительного решения о выполнении работ с требуемым качеством. После ввода в компьютерно-реализуемую систему подготовленных данных по описанным ранее способам были проведены вычисления количественных значений критериев, используемых для оценки зрелости проекта, в т.ч. уровня зрелости проекта (TPML), индекса зрелости проекта (I_M), полноты выполнения работ по проекту К: работ, направленных на достижение технологической готовности (TR), производственной готовности (MR), инженерной готовности (ER), готовности организационного обеспечения проекта (OR), работ по обеспечению преимуществ проекта и сглаживанию рисков проекта (SR), работ по определению рыночной готовности и коммерциализации результатов проекта (CR). Результаты вычислений, в сравнении с планируемыми значениями, представлены в таблице 7.

Данные планируемых и фактических значений критериев зрелости проекта (таблицы 7) для критериев K_TR, K_MR, K_ER, K_OR, K_SR, K_CR - полноты выполнения работ по проекту, для контрольных точек на «экваторе» (середине) проекта 404 и в конце проекта 408 представлены в графическом виде на ФИГ. 8.

Из графика, представленного на ФИГ. 8 видно, что на «экваторе» проекта, 404 может быть сделан вывод о том, что проект развивается не сбалансированно, в частности, исполнители проекта не выполнили значительное количество работ по определению рыночной готовности и коммерциализации результатов проекта (CR), а также работ по достижению производственной готовности (MR), и если в конце проекта 408 после оперативного реагирования органа управления исполнителем проекта был завершен весь комплекс работ по подготовке производства (MR) для промышленного внедрения результатов проекта, то работы по определению рыночной готовности и коммерциализации результатов проекта (CR) так и не были выполнены в полном объеме.

Оценивая результаты проекта в целом, можно сделать вывод о том, что во время его выполнения уровень его зрелости не достиг требуемого значения.

В качестве описываемой системы может быть использован персональный компьютер с установленной на нем операционной системой, относящейся к наиболее распространенным типам операционных систем MS Windows, Mac OS или Linux, содержащий центральный процессор, оперативное запоминающее устройство, накопитель на жестком диске (или блок памяти, или хранилище данных, или БД), клавиатуру, монитор, коммуникационные устройства для обеспечения работы с интернет ресурсами (сетевой адаптер), а также выходное устройство (блок вывода данных/отображения обработанных данных, например, монитор, или монитор совместно с принтером). Решение вычислительных задач может осуществляться под управлением центрального процессора, представляющего из себя электронный блок, либо интегральную схему (микропроцессор), исполняющие машинные инструкции (код программ) в зависимости от введенных в процессор машинных инструкций. В заявляемом изобретении машинные инструкции могут быть изложены в виде функций, предписанных для исполнения процессором, а именно, обеспечивающие расчет количественных значений уровня зрелости проекта, количественных значений результатов решения задач, степеней уверенности в выполнении работ и сравнение этих значений с пороговыми величинами, количественных значение результатов выполнения работ, вычисление вектора, характеризующего достижение состояний уровня зрелости, коррекция вектора, характеризующего достижение показателей уровня зрелости с использованием матрицы взаимосвязи, расчет коэффициентов полноты выполнения для описывающих в совокупности сбалансированное развитие проекта работ, направленных на достижение технологической готовности (TR), производственной готовности (MR), инженерной готовности (ER), готовности организационного обеспечения проекта (OR), работ по обеспечению преимуществ проекта и сглаживанию рисков проекта (SR), работ по определению рыночной готовности и коммерциализации результатов проекта (CR), расчет индекса зрелости проекта и его сравнение с прогнозируемым значением на данный момент времени, сортировка (ранжирование) проектов по значению индекса зрелости. Процессор выполнен с возможностью обработки информации (данных), полученных по заявляемому способу с использованием критериев оценки TPML, I, K_TR, K_MR, K_ER, K_OR, K_SR, K_CR. Блок обработки данных, как правило, установлен в системном блоке, выполняющем машинно-исполняемые инструкции. Заявляемая система в одном из вариантов исполнения может быть построена на архитектуре фон Неймана, определяющей широко известный принцип совместного хранения команд (инструкций) и данных в памяти компьютера.

Как описано в рамках настоящего изобретения, в частном случае, описываемое изобретение, в том числе описываемый способ расчета, использует логику выполнения научно-технологического проекта как по требованиям ГОСТ, так и по требованиям различных практик выполнения инновационных проектов, для чего может быть использована модель, описывающая порядок этого процесса.

Для модели задается базовый набор показателей, а именно:

- при выполнении проекта на каждом уровне зрелости L необходимо проведение разных исследований, которые формируют для каждого уровня набор состояний - итогов этих исследований L|S={S_I, I=1, 2, … N_L}. В частном случае, для каждого уровня количество этих состояний N_L различно при проведении разного

количества исследований. Далее в качестве примера выбран один уровень (в частности, для примера будет использован любой выбранный уровень);

- в каждом из упомянутых исследований требуется решение, по крайней мере, одной задачи (одной, нескольких, множества задач). Набором таких задач Т для выбранного показателя этого уровня, например, I-го, является величина S_I|Т={T_J, J=1, 2, …, N_SI}, где N_SI - количество таких задач именно для достижения этого выбранного состояния у выбранного уровня зрелости;

- процесс решения задач разбивается на работы. Если выбрана одна из задач J у выбранного состояния, то ее набор работ А представим в виде T_J|A={A_M, M=1, 2, …, N_TJ}. Каждая работа направлена на достижение определенной группы показателей проекта TR,MR,ER,OR,SR,CR, и имеет соответствующий тип, совпадающий с группой показателей проекта, который используется при расчете полноты выполнения работ по каждому из уровня готовности - TR, MR, ER, OR, SR, CR;

- далее осуществляется выбор работы выбранной задачи выбранного показателя. Каждая работа включает набор результатов и свидетельств их получения А_М|Е={E_U, U=1, 2, …, N_AM}. Эти свидетельства обладают разным вкладом (весом), для принятия утвердительного решения о получении результата с требуемым качеством, а также относительную важность свидетельств получения требуемых результатов факты обладают разной значимостью (или вкладом) для выполнения работы. Все свидетельства содержаться в проектной документации - E_U|D={D_Y, Y=1, 2, …, N_EU}.

Приведенная выше таблица 6, содержит фрагмент модели для первого (1-го) уровня зрелости проекта. Первый уровень группировки (первая группа) включает строки таблицы для состояний уровня зрелости, в частности в таблице 6 приведены сведения для одного из состояний - Состояние S3. Проведен анализ существующих на рынке решений.

Второй уровень группировки (вторая группа) включает строки таблицы для задач, которые необходимо решить для достижения показателей, в частности, в таблице 6 указаны задачи, которые необходимо решить для выполнения указанного вые показателя уровне зрелости.

Третий уровень группировки определяет набор работ А для решения этих задач.

Для каждой работы может быть указан набор фактов (свидетельств), в частности, содержания показателей, с их весами, а также набор требований, которым должны соответствовать свидетельства (в частности, вероятностями).

Для процесса оценки:

- для достигнутого/выполненного уровня, если все его состояния достигнуты, т.е. проведены все исследования, количественное значение S каждого из состояний равно 1 или 0, что позволяет установить результат достижения уровня зрелости, используя произведение TPML_L=S₁*S₂*…*S_NL;

- каждый из показателей S_I достигнут (т.е. равен 1), если решены все входящие в него задачи: S_I=Т₁*Т₂*…*T_NSI;

- работа выполнена, если по совокупности свидетельств подтверждены все результаты для нее: T_J=A₁*А₂*…A_NTJ;

- если в процессе оценки фактов (полученных из документов по проекту), например, экспертом и/или средствами описываемой системы, установлен факт, что они обладают необходимым качеством, т.е. могут быть использованы для подтверждения определенного результата, то, используя базовый набор показателей, а именно значения весовых коэффициентов для свидетельств W_(E), осуществляется вычисление (расчет) величины W_A для каждой работы по набору ее свидетельств: W_A=Σ(W(E_U)*Q(E_U))/ΣW(E_U), причем если качество фактов является недостаточным (например, если эксперт начинает сомневаться в качестве фактов), то может осуществляться (экспертом или средствами описываемой системы) изменение значения величины W(E_U) для определенного факта за счет умножения этой величины на поправочный коэффициент 0≤Q(E_U)≤1, например, может осуществляться обнуление W(E_U), уменьшение значения W(E_U), например, в два раза, или может быть задано новое значение W(E_U). Например, эксперт может нажать кнопку «Не согласен» для обнуления W(E_U), или, например, кнопку, «Не полностью», и W(E_U), уменьшается вдвое («половинится»), или может ввести (задать) новое (собственное) значение такой величины;

- после получения значения W_A, такое значение сравнивается с заданным пороговым значением, причем если такое значение больше заданного порога W_порог, то количественное значение выполнения работы приравнивается единице («1»), а если меньше порога, то - нулю («0»);

- далее осуществляется перемножение всех значений А для получения в результате значения Т, перемножение которых, в свою очередь, дает значения S;

- в частном случае, некоторые состояния S не могут быть достигнуты раньше других. Такая взаимосвязь определяется матрицей взаимосвязи, примерный вариант которой для уровня зрелости, равного единице, приведен в таблице 8 с учетом того факта, что для достижения уровня зрелости проекта, равного 1, необходимо выполнение 10 показателей от S₁ до S₁₀. Данная матрица строится на основе последовательности проведения исследований по времени, которая определяется, в частном случае, из ГОСТ и практик выполнения инновационных проектов, а также учета мнения экспертов;

- если все значения S представить в виде вектора, скорректированный вектор S является результатом его умножения справа на матрицу взаимосвязи. В частном случае, не все значения, равные единице останутся без изменений (равными единице). В частном случае, некоторые могут обнулиться (в частности, их значения могут стать равными нулю). Такой получившийся в результате вектор является скорректированным вектором состояний уровня зрелости. В данном случае осуществляется отслеживание изменений при изменении численного значения состояния уровня с единицы на ноль;

- если значение какого-то состояния стало равным нулю, то осуществляется обнуление всех значений Т, связанных с ним (которые к нему «привязаны»), даже если они были рассчитаны средствами описываемой системы как единица ("1");

- если обнулилось какое-то из значений Т, то осуществляется обнуление всех значений А, которые с ней связаны (которые к ней «привязаны»);

- далее вычисляется количество всех результатов выполнения работ для каждого типа работ, которые равны единице. Это количество, разделенное на общее количество работ такого типа, что дает представление о полноте выполнения работ данного типа. В частности, базовый набор работ для уровня зрелости, равного L=1, составляет 104 работы, а количество работ для типа TR составляет 23, для MR - 4, для ER - 0, для OR - 7, для SR - 38, для CR - 32.

Любой базовый набор показателей модели может быть дополнен оператором (администратором и т.д.) описываемой системы, например, путем изменения шаблона экспертной анкеты для определенных проектов или экспертом, адаптируя конкретную анкету для конкретного проекта, или автоматически средствами описываемой системы в результате обработки данных, как описано в рамках настоящего изобретения.

В частном случае описываемое изобретение является аналитическим инструментом для поддержки экспертного решения, и может быть направлено на повышение эффективности финансовых вложений в научно-технологические проекты, а также позволяет найти ответы на вопросы, какие из проектов наиболее готовы к практическому использованию в реальных секторах экономики, а какие не имеют перспектив коммерциализации с точки зрения рисков их выполнения и возможных финансовых затрат на их выполнение. Полученная совокупность количественных оценок по проектам обеспечивает их ранжирование по степени готовности к коммерциализации, инвестиционной привлекательности и приоритетности при принятии управленческих решений.

Заявляемое изобретение было апробировано на научно-технологических проектах, выполняемых в различных научно-технических предметных областях. При этом изобретение также может быть использовано при управлении научно-технологическими проектами и в других областях науки, техники и производства, может способствовать инновационному развитию сектора исследований и разработок, обеспечению конкурентоспособности создаваемых продуктов и услуг, а также повысить эффективность расходования бюджетных средств, направляемых на развитие национальной научно-технологической сферы.

В заключение следует отметить, что приведенные в описании сведения являются примерами, которые не ограничивают объем настоящего изобретения, определенного формулой. Специалисту в данной области становится понятным, что могут существовать и другие варианты осуществления настоящего изобретения, согласующиеся с сущностью и объемом настоящего изобретения.

Группа изобретений относится к вычислительной технике. Группа изобретений является разработкой нового решения, касающегося оценки научно-технологических проектов для широкого круга научно-технических дисциплин, разработки лекарственных препаратов и медицинских изделий, информационно-коммуникационных технологий и разработки программного обеспечения, а также промышленного производства на предмет оценки их зрелости с точки зрения готовности их результатов к коммерциализации и промышленному внедрению. Технический результат состоит в обеспечении возможности обработки разнородных данных, касающихся исследований и разработок в научно-технологической сфере, информационно-коммуникационных технологиях и разработки программного обеспечения, а также в производстве лекарственных препаратов и медицинских изделий и в промышленном производстве, что позволяет произвести оценку исследуемых проектов и осуществить ранжирование получаемых результатов. 2 н. и 12 з.п. ф-лы, 8 ил., 8 табл.

1. Компьютерно-реализуемый способ обработки данных для комплексной оценки зрелости научно-технологического проекта, выполняемый с помощью вычислительного устройства и содержащий этапы, на которых:

- осуществляется формирование массива информации, составленного с использованием данных, содержащихся в требованиях нормативных документов и стандартов, предъявляемых к процессам выполнения проекта, идентифицирующей и характеризующей уровни зрелости проектов и включающей базовый набор данных, включающий базовый перечень состояний, базовый перечень задач, базовый перечень работ, базовый перечень свидетельств, подтверждающих получение результатов работ с требуемым качеством, посредством добавления параметров, идентифицирующих и характеризующих уровни зрелости проектов;

- осуществляется формирование массива информации, содержащего значения величин, характеризующие веса каждого из свидетельств для принятия решения о том, что работа выполнена в полном объеме с требуемым качеством, причем величины характеризуют важность каждого из оцениваемых свидетельств по сравнению с другими свидетельствами;

- осуществляется формирование шаблонов экспертных анкет из данных массивов информации;

- осуществляется формирования набора данных из данных, содержащихся в документах проекта;

- осуществляется задание параметров начальных и конечных значений оцениваемых параметров и критериев уровня зрелости проекта, временной шкалы с расположенными на ней контрольными точками и прогнозируемыми значениями индекса зрелости проекта, прогноза их изменения по времени выполнения проекта, которые характеризуют проект, из данных сформированного набора данных, где прогноз является вычислением параметров проекта по временной шкале с установлением факта того, оправдывается прогноз или нет;

- осуществляется оценка качества фактов, извлеченных из оцениваемых документов, с использованием заданных значений оценки фактов и данных документов исполнителей проектов для оценки свидетельств, подтверждающих получение результатов, при этом полученной оценке соответствует численное значение степени уверенности, при которой свидетельство подтверждает наличие в материалах проектах результата, для описания которого оно представлено исполнителем проекта в составе документации по проекту;

- осуществляется вычисление скорректированного вектора достигнутых состояний уровня зрелости проекта, где скорректированный вектор достигнутых состояний уровня зрелости формируется после коррекции результата расчета состояний с использованием матрицы взаимосвязи, причем:

- осуществляется вычисление значения достигнутого состояния уровня зрелости проекта S_I для каждого из проектов посредством перемножения количественных значений показателей T_J для каждой задачи, каждый из которых характеризует итог ее решения и вычисляется посредством перемножения всех значений A_M результатов работы с целью определения полноты решения задачи, где индекс М принимает значения от 1 до N_TJ, причем значение A_M равно единице для выполненной работы A_M, если значение величины W_A больше либо равно значению W пороговой, или для невыполненной работы A_M равно нулю, если значение W_A меньше порогового значения W_порог, для работ из перечня работ T_J|A={A_M, М=1, 2, …, N_TJ}, направленных на достижение соответствующей готовности проекта - TR, MR, ER, OR, SR, CR, где TR - технологическая готовность, MR - производственная готовность, ER - инженерная готовность, OR - готовность организационного обеспечения проекта, SR - работ по обеспечению преимуществ проекта и сглаживанию рисков проекта, CR - работ по определению рыночной готовности и коммерциализации результатов проекта, на определенном уровне зрелости L проекта, ассоциированных с показателем T_J задачи, и свидетельств из перечня свидетельств о результатах их выполнения A_M|Е={E_U, U=1, 2, …, N_AM}, указанных в документах, представляемых исполнителем проекта для установления факта выполнения работы, где количественное значение выполнения работы устанавливается по всей совокупности входящих в нее свидетельств на основании сравнения величины W_A, рассчитываемой по формуле W_A=Σ(W(E_U)*Q(E_U))/ΣW(E_U) и позволяющей при оценке сделать вывод о том, что результат выполнения работы удовлетворяет ранее заданным требованиям, с пороговой величиной W_порог, где свидетельства E_U характеризуются задаваемым весовым коэффициентом W(E_U), величина которого характеризует вклад каждого свидетельства E_U для принятия утвердительного решения о получении результата, соответствующего требуемому качеству, а также относительную важность свидетельств получения требуемых результатов, причем если полученный результат соответствует установленным требованиям, то E_U=W(E_U), если же качество какого-либо из оцениваемых свидетельств не соответствует заданным требованиям, то значение E_U приравнивается величине W(E_U), умноженной на поправочный коэффициент Q(E_U) (0≤Q(E_U)≤1), причем если информация о свидетельстве в материалах проекта отсутствует, то значение W_U умножается на поправочный коэффициент, значение которого равно нулю, а если качество представленного свидетельства удовлетворяет требованиям, то значение W_U умножается на поправочный коэффициент, значение которого равно единице;

- осуществляется корректировка значений координат вектора достигнутых состояний с использованием матрицы взаимосвязи ММ, элементы которой определяют взаимосвязь между состояниями заданного уровня зрелости проекта с использованием данных требований нормативных документов и стандартов, предъявляемых к процессам выполнения инновационных проектов, причем каждый элемент матрицы устанавливается на основе правила MM_I,J=1/R, если состояние S_I связано с состоянием S_J, и ноль, если нет, причем значение R равно количеству всех связей состояния S_I с остальными состояниями, в том числе самим собой, и для корректировки значения вектора состояний А он умножается справа на матрицу ММ по правилам матричного умножения, причем если в итоге каждая компонента вектора S равна 1, то текущий уровень зрелости проекта TPML в данный момент времени достигнут, а если он совпадает с прогнозным значением, установленным в контракте или соглашении на выполнение проекта, то проект выполняется в соответствии с установленными требованиями и не требует принятия мер оперативного реагирования;

- осуществляется вычисление значения уровня зрелости проекта, TPML_L с использованием декомпозиции процесса выполнения проекта как системы состояний, задач, работ и свидетельств получения результатов работ в процессе выполнения проекта, где каждому уровню зрелости L проекта соответствуют набор состояний и соответствующие им количественные значения L|S={S_I, I=1, 2, … N_L}, причем значения S_I равны единице («1»), если состояния достигнуты, и нулю («0»), если нет, и для достижения указанных состояний исполнителями проекта должны быть решены соответствующие задачи, которым также ставятся в соответствие количественные значения, по крайней мере, для показателя S_I|T={TJ, J=1, 2, …, NS_I}, причем значения T_J равны единице, если соответствующая задача решена, и нулю, если нет, и каждая задача разбивается на ряд работ, направленных на достижение соответствующей готовности проекта - TR, MR, ER, OR, SR, CR, которым также ставятся в соответствие количественные значения, по крайней мере, для задачи T_J|A={A_M, M=1, 2, …, N_TJ}, причем значения A_M равны единице, если работа выполнена, и нулю, если нет, причем итогом выполнения этих работ являются результаты, которым также ставятся в соответствие количественные значения, по крайней мере, для работы A_M|Е={E_U, U=1, 2, …, N_AM}, а доказательствами получения результатов являются описания и свидетельства в совокупности с фактами, E_U, которые представляются исполнителями проекта в составе документов о ходе выполнения проекта, где значениям E_U также ставятся в соответствие количественные величины, причем такие данные о полученных результатах являются набором оцениваемых свидетельств и значение E_U зависит от того, каково качество содержащихся в проектной документации E_U|D={D_Y, Y=1, 2, …, N_EU} подтверждающих сведений об этом свидетельстве, причем:

- значение уровня зрелости проекта TPML_L равно уровню зрелости проекта L, если каждое вычисленное значение достигнутого состояния уровня зрелости проекта S_I равно единице, или равно значению L минус единица в противном случае;

- осуществляется вычисление значения индекса зрелости проекта, причем:

- осуществляется вычисление общего количества всех состояний N уровня зрелости, как достигнутых - NN, так и не достигнутых, как сумма всех состояний N уровня зрелости;

- осуществляется расчет значения индекса зрелости проекта I_M проекта по формуле I_M=TPML_L-1+NN/N;

- осуществляется вычисление значений критериев K_TR, K_MR, K_ER, K_OR, K_SR, K_CR, определяющих полноту выполнения работ по проекту, описывающих в совокупности сбалансированное развитие проекта и направленных на достижение технологической готовности TR; производственной готовности MR; инженерной готовности ER; готовности организационного обеспечения проекта OR; работ по обеспечению преимуществ проекта и сглаживанию рисков проекта SR; работ по определению рыночной готовности и коммерциализации результатов проекта CR; на определенном уровне зрелости в момент проведения оценки уровня зрелости проекта, причем:

- осуществляется вычисление значений NN_TR, NN_MR, NN_ER, NN_OR, NN_SR, NN_CR, определяющих количество реально выполненных работ по координатам скорректированного вектора достигнутых состояний S;

- осуществляется корректировка значений T_J, где если значение S_I равно единице, то все связанные с ним значения T_J равны единице, а если значение SI равно нулю, то все связанные с ним значения T_J равны нулю;

- осуществляется корректировка значений A_M, где если значение T_J равно единице, то все значения A_M, ассоциированные с ним, устанавливаются равными единице, а если значение T_J равно нулю, то все значения A_M, ассоциированные с ним, устанавливаются равными нулю;

- для вычисления полноты выполнения работ, относящихся к одной из групп параметров проекта, осуществляется вычисление количества элементов A_M, значение которых равно 1 - (NN_TR, NN_MR, NN_ER, NN_OR, NN_SR, NN_CR), и осуществляется вычисление общего количества полученных элементов A_M - N_TR, N_MR, N_ER, N_OR, N_SR, N_CR;

- осуществляется вычисление значений K_TR, K_MR, K_ER, K_OR, K_SR, K_CR как результата деления NN_TR, NN_MR, NN_ER, NN_OR, NN_SR, NN_CR на N_TR, N_MR, N_ER N_OR, N_SR, N_CR соответственно.

2. Способ по п. 1, в котором начальные и конечные значения оцениваемых параметров и критериев уровня зрелости проекта формируются текущего уровня зрелости и из данных проекта, содержащихся в конкурсных заявках, пояснительных записках и справках проекта.

3. Способ по п. 1, в котором осуществляется формирование дополнительного набора оцениваемых атрибутов, устанавливаемых органом управления для проекта или группы проектов для изменения шаблонов проектов или экспертом для оценки проекта для изменения анкеты.

4. Способ по п. 1, в котором при проведении экспертной оценки качества представленных исполнителем свидетельств о полученных в ходе выполнения проекта результатах используются данные проекта, при этом осуществляется изменение экспертной анкеты посредством изменения или расширения базового перечня состояний уровня зрелости, базового перечня задач, базового перечня работ, базового перечня свидетельств получения результатов работ, а также базового перечня документов, в которых должны содержаться свидетельства.

5. Способ по п. 4, в котором добавляются для измененных или добавленных в перечень результатов работ значения величин, характеризующих веса каждого из свидетельств для принятия утвердительного решения о выполнении работ с требуемым качеством.

6. Способ по п. 1, в котором оценка качества фактов, извлеченных из оцениваемых документов, включает оценку качества фактов о полученных в ходе выполнения проекта результатах в формате анкеты.

7. Способ по п. 1, в котором осуществляется предъявление результатов обработки результатов расчетов по проекту в одном из известных форматов предъявления данных пользователю, включающих результаты ранжирования проектов, индексы зрелости проектов, динамики изменения индекса зрелости проекта в том числе в сравнении с прогнозируемой, характеризующую полноту проекта степень выполнения работ, ассоциированных с параметрами проекта TR, MR, ER, OR, SR, CR.

8. Способ по п. 1, в котором осуществляется формирование набора рекомендаций исполнителям проектов, причем если в ходе упомянутой обработки было установлено, что развитие проекта отстает от плановых показателей, то формируются рекомендации исполнителям проектов, направленные на повышение эффективности выполняемых ими работ, содержащие рассчитанные количественные значения оцениваемых критериев зрелости проекта.

9. Способ по п. 1, в котором, если значение TPML_L не равно значению L, то повторяется вычисление скорректированного вектора достигнутых состояний уровня зрелости проекта, а если значение TPML_L равно значению L, то устанавливается факт совпадения плана с фактом в данный момент времени.

10. Способ по п. 1, в котором если значение индекса зрелости проекта I_M меньше прогнозного значения индекса зрелости проекта I_план, то осуществляется выработка управленческих решений, и если значение индекса зрелости проекта I_M больше либо равно прогнозному значению индекса зрелости проекта I_план, то устанавливается факт нормального развития проекта.

11. Способ по п. 1, в котором индекс зрелости проекта I_M определяется по формуле I_M=TPML_L-1+NN/N, где N - размерность вектора S, и значение индекса зрелости проекта 1 м определяет динамику выполнения проекта на различных временных интервалах выполнения проекта в пределах одного уровня зрелости проекта, и если его значение совпадает или превышает прогнозное значение в определенный момент времени выполнения проекта, установленное в документах на выполнение проекта, то устанавливается факт, что проект выполняется в соответствии с установленными требованиями и не требует принятия мер оперативного реагирования.

12. Способ по п. 1, в котором если значение какого-либо из критериев K_TR, K_MR, K_ER, K_OR, K_SR, K_CR, определяющих полноту выполнения работ по проекту, ассоциированных с соответствующей группой параметров проекта и описывающих в совокупности сбалансированное развитие проекта: работ, направленных на достижение технологической готовности (TR), производственной готовности (MR), инженерной готовности (ER), готовности организационного обеспечения проекта (OR), работ по обеспечению преимуществ проекта и сглаживанию рисков проекта (SR), работ по определению рыночной готовности и коммерциализации результатов проекта (CR), меньше единицы, то работы, ассоциированные с соответствующим параметром, считаются не выполненными, так что необходимо принять меры оперативного вмешательства в ход выполнения проекта с предъявлением данного факта пользователю, и если значение критерия какого-либо из критериев K_TR, K_MR, K_ER, K_OR, K_SR, K_CR не превышает заранее заданного критериального значения, то у проекта существует значительный риск его невыполнения, что является основанием для принятия решения на прекращение выполнения проекта.

13. Способ по любому из предыдущих пунктов, в котором осуществляют:

- формирование массива данных параметров, идентифицирующих и характеризующих уровни зрелости проектов, базовый перечень показателей, базовый перечень задач, базовый перечень работ, базовый перечень результатов работ, базовый перечень документов, и ввод их в блок памяти компьютерно-реализуемой системы,

- подключение к базе данных системы мониторинга за ходом выполнения проекта по проводным или беспроводным каналам связи и импорт из нее документов проекта для последующей оценки состояния проекта,

- подготовка и ввод в компьютерно-реализуемую систему прогнозных (планируемых) значений оцениваемых параметров - уровень зрелости проекта, индекс зрелости проекта, с указанием моментов времени, в которые должно быть установлено выполнения прогноза,

- экспертное оценивание качества свидетельств, представленных исполнителем проекта в документах по проекту, и ввод полученных оценок в компьютерно-реализуемую систему, при этом полученной оценке соответствует определяемое экспертом численное значение степени уверенности, с которой можно утверждать, что свидетельство подтверждает наличие в материалах проекта результата, для описания которого оно представлено исполнителем проекта в составе документации по проекту;

- обработку массива данных по соответствующим критериям с последующей оценкой результата обработки по каждому критерию с присвоением значения из заданного интервала значений.

14. Система обработки данных для комплексной оценки зрелости научно-технологического проекта, содержащая в себе, по крайней мере, одно вычислительное устройство, которое выполнено с возможностью исполнять способ по любому из предыдущих пунктов.