Методика оценки эффективности изобретений

Методика оценки эффективности изобретений

1. Назначение методики
Эффективность является наиболее количественно измеримым из трех базовых критериев ранга изобретения.

Однако именно кажущаяся простота этого показателя создает риск методологических ошибок.

Изобретение может быть:

быстрее, но значительно дороже;
дешевле, но менее надежно;
производительнее, но потреблять больше энергии;
технически превосходным, но немасштабируемым.
Поэтому эффективность не должна определяться по одному произвольно выбранному показателю.

Под эффективностью изобретения понимается степень улучшения полезного результата относительно релевантной базы сравнения при сопоставимых условиях и с учетом совокупности критически значимых затрат и ограничений.

2. Виды эффективности
Необходимо различать несколько уровней.

Техническая эффективность
Характеризует функциональные параметры технологии.

Экономическая эффективность
Характеризует соотношение экономического результата и затрат.

Ресурсная эффективность
Показывает использование:

энергии;
материалов;
вычислительных ресурсов;
земли;
воды;
дефицитного сырья.
Временная эффективность
Отражает сокращение времени выполнения функции.

Масштабная эффективность
Показывает способность сохранять результат при увеличении масштаба применения.

Системная эффективность
Учитывает влияние изобретения на весь производственный или технологический контур.

Для высокофундаментальных изобретений необходимо рассматривать несколько типов эффективности одновременно.

3. Определение основной функции
До выбора показателей необходимо четко установить, какую функцию выполняет изобретение.

Нельзя сравнивать системы, решающие существенно разные задачи, только потому, что они имеют внешнее сходство.

Необходимо определить:

основной полезный результат;
минимально необходимые свойства;
критические ограничения;
условия эксплуатации;
масштаб.
Только после этого выбирается эталон.

4. Выбор базы сравнения
Эффективность всегда относительна.

Эталоном должно быть:

лучшее доступное решение;
либо репрезентативный современный класс технологий;
либо иной заранее обоснованный фронтир.
Не рекомендуется использовать исключительно среднюю устаревшую технологию, если существуют существенно лучшие аналоги.

Для исторической оценки используется уровень, существовавший до появления оцениваемого изобретения.

База сравнения должна фиксироваться до окончательного присвоения высокого ранга.

5. Принцип функциональной эквивалентности
Сравниваемые системы должны обеспечивать сопоставимую функцию.

Если новая система быстрее, но значительно хуже по качеству, прямое сравнение скорости некорректно.

Поэтому необходимо выравнивать условия по критически значимым параметрам.

Например:

одинаковый уровень качества;
одинаковая нагрузка;
одинаковая надежность;
сопоставимый срок службы;
одинаковая точность;
одинаковый объем результата.
После такого выравнивания можно сравнивать эффективность.

6. Выбор ключевого показателя
Для каждого класса изобретений необходимо определить первичный показатель эффективности.

Им может быть:

производительность;
стоимость единицы результата;
энергия на единицу результата;
время;
точность;
пропускная способность;
ресурс.
Первичный показатель должен отражать основную функцию, ради которой создается система.

Нельзя выбирать показатель постфактум только потому, что именно по нему новое изобретение выглядит наиболее выгодно.

Выбор должен быть обоснован до окончательного сравнения.

7. Система ограничивающих показателей
Помимо основного показателя необходимо фиксировать показатели, ухудшение которых способно обесценить результат.

Например:

безопасность;
надежность;
стоимость;
энергопотребление;
срок службы;
ремонтопригодность;
масштабируемость.
Порядковое преимущество по основному параметру не должно признаваться полноценным, если оно достигнуто ценой неприемлемого ухудшения критического ограничения.

Это принцип неухудшающей или контролируемо ухудшающейся эффективности.

8. Техническая эффективность
Техническую эффективность следует измерять максимально непосредственно.

В зависимости от предметной области используются:

лабораторные испытания;
натурные испытания;
измерительные системы;
моделирование;
стандартизированные тесты.
Желательно использовать несколько режимов работы, а не одну специально подобранную точку.

Особенно важно проверять:

устойчивость результата;
повторяемость;
границы применимости;
чувствительность к условиям.
Высокий технический ранг должен подтверждаться не единичным рекордом, а устойчивым преимуществом.

9. Экономическая эффективность
Экономическая эффективность должна учитывать полный жизненный цикл.

Возможные составляющие затрат:

разработка;
капитальные вложения;
эксплуатация;
обслуживание;
энергия;
материалы;
персонал;
ремонт;
утилизация.
Полезный результат может выражаться через:

прибыль;
снижение себестоимости;
рост выпуска;
уменьшение капиталоемкости;
повышение доступности;
снижение риска.
Особенно важно не смешивать экономическую эффективность изобретения и рыночную власть компании.

Монополия может создавать высокую прибыль при умеренной технической эффективности.

Высокая прибыль поэтому не является автоматическим доказательством высокого ранга изобретения.

10. Эффективность по жизненному циклу
Многие технологии выглядят эффективными на стадии использования, но оказываются менее привлекательными с учетом производства и обслуживания.

Поэтому для значимых изобретений рекомендуется оценка полного жизненного цикла:

создание ; производство ; эксплуатация ; обслуживание ; завершение использования.

Это особенно важно для:

энергетики;
крупных инфраструктур;
материалов;
транспортных систем;
сложного оборудования.
11. Масштабируемость как критерий эффективности
Лабораторный результат может быть впечатляющим, но полностью исчезать при масштабировании.

Поэтому следует отдельно оценивать:

рост затрат с масштабом;
надежность;
доступность сырья;
требования к инфраструктуре;
управляемость.
Для высоких рангов желательно подтверждение того, что ключевой эффект не является исключительно лабораторным артефактом.

При отсутствии масштабной проверки статус может оставаться предварительным.

12. Порядковое повышение эффективности
В отличие от фундаментальности и оригинальности, эффективность во многих случаях допускает прямую проверку порядкового превосходства.

Для ароизобретательского кандидата необходимо подтвердить более чем десятикратное превосходство по релевантному критерию либо эквивалентному комплексу сопоставимых показателей.

Для демиизобретения первого уровня — не менее чем стократное превосходство относительно стандартной базы, если природа показателя допускает прямое сравнение.

Для последующих демиургических уровней базой становится соответствующий предшествующий демиургический фронтир.

При этом должны соблюдаться условия функциональной эквивалентности и недопустимости критического ухудшения других параметров.

13. Многопараметрическая эффективность
Во многих случаях одно изобретение улучшает сразу несколько параметров.

Например:

в несколько раз быстрее;
дешевле;
точнее;
энергоэффективнее.
Не следует механически перемножать любые улучшения только для получения желаемого порядка.

Необходимо определить:

являются ли параметры независимыми;
отражают ли они разные стороны полезного эффекта;
нет ли двойного учета одного и того же результата;
насколько экономически существенен каждый показатель.
Итоговая многофакторная оценка должна формироваться отдельно в общей матрице ранга.

14. Случай новой функции
Особая проблема возникает, если прежняя технология вообще не могла выполнять функцию.

В этом случае обычное отношение «новое к старому» не имеет смысла: базовый показатель может быть равен практически нулю.

Не следует объявлять эффективность математически бесконечной.

Вместо этого фиксируется переход функциональной доступности:

функция отсутствовала;
существовала только экспериментально;
была экономически недоступна;
после изобретения стала практически или массово доступной.
Такой переход рассматривается как специальный высокоранговый признак.

Он должен анализироваться совместно с фундаментальностью и оригинальностью.

15. Эффективность снятия ограничения
Некоторые изобретения ценны прежде всего тем, что устраняют ограничение.

Например, ранее система не могла работать:

в определенном масштабе;
с необходимой скоростью;
при ограниченном энергопотреблении;
в конкретной среде.
В таком случае эффективность оценивается через изменение границы применимости.

Если изобретение расширяет ее незначительно, эффект стандартный.

Если оно открывает качественно новый диапазон, возможно высокое ранговое значение.

16. Временная структура эффективности
Необходимо различать:

Лабораторную эффективность
Подтверждена в контролируемом эксперименте.

Прототипную
Подтверждена работающим прототипом.

Производственную
Подтверждена в реальной технологической среде.

Масштабированную
Сохраняется при массовом применении.

Исторически подтвержденную
Долгосрочный эффект доказан практикой.

Высокий окончательный ранг предпочтительно основывать на наиболее зрелой доступной стадии.

17. Неопределенность измерений
Любое измерение имеет ошибку.

Поэтому при заявлении десятикратного или стократного превосходства необходимо учитывать:

погрешность приборов;
вариативность среды;
статистическую неопределенность;
различия в режимах эксплуатации;
качество исходных данных.
Порог не должен считаться подтвержденным, если результат находится непосредственно на границе и легко исчезает внутри разумного диапазона неопределенности.

Чем выше заявляемый ранг, тем больше должен быть запас доказательности.

18. Репликация результата
Высокий показатель эффективности желательно подтверждать независимым воспроизведением.

Это особенно важно для:

экспериментальных технологий;
новых материалов;
энергетических систем;
биотехнологий;
алгоритмов с вероятностным поведением.
Единичный результат может быть следствием ошибки, особых условий или подгонки.

Поэтому принцип независимой репликации является одним из основных элементов доказательной базы высокого ранга.

19. Контрфактическая база
Для экономического анализа полезно задавать вопрос:

что происходило бы без данного изобретения?

Это позволяет отделить эффект собственно изобретения от:

общего удешевления оборудования;
роста вычислительной мощности;
изменения цен;
внешней инфраструктуры;
параллельных технологических улучшений.
Особенно важно это для ретроспективного анализа.

Экономический эффект, возникший после изобретения, не всегда полностью вызван именно им.

20. Системная эффективность
Высокофундаментальное изобретение может ухудшать один локальный показатель, но радикально улучшать систему в целом.

Поэтому для аро- и демиургических кандидатов необходимо оценивать системную эффективность.

Она может включать:

сокращение числа технологических стадий;
устранение целого класса оборудования;
уменьшение сложности цепочки;
сокращение потребности в человеческом труде;
возникновение новой формы автоматизации.
Такие изменения иногда значительно важнее локального коэффициента полезного действия отдельного элемента.

21. Генеративная экономическая эффективность
Для фундаментальных изобретений часть эффективности реализуется через последующие технологии.

Можно выделить генеративную экономическую эффективность — способность изобретения снижать стоимость или увеличивать производительность будущей инновационной деятельности.

Примеры структуры эффекта:

новая вычислительная платформа ускоряет множество исследований;
новый научный инструмент уменьшает стоимость экспериментов;
новый ИИ повышает производительность тысяч творческих процессов.
Такой эффект должен учитываться отдельно и не смешиваться с непосредственной технической эффективностью исходного устройства.

22. Матрица видов эффективности
Вид Основной вопрос
Техническая Насколько лучше выполняется функция?
Экономическая Насколько изменяется стоимость результата?
Ресурсная Насколько экономнее используются ресурсы?
Временная Насколько быстрее достигается результат?
Масштабная Сохраняется ли преимущество при масштабировании?
Системная Насколько улучшается вся технологическая цепочка?
Возможностная Какие ранее недоступные функции стали доступны?
Генеративная Насколько изобретение повышает эффективность последующего творчества?
23. Принцип недопустимости однопараметрического завышения
Высокий ранг не должен присваиваться только потому, что одна характеристика улучшилась на порядок.

Следует проверить:

функциональную эквивалентность;
критические побочные ухудшения;
реальную потребительскую или производственную ценность параметра;
устойчивость эффекта.
Например, система в сто раз быстрее, но в тысячу раз дороже и пригодна только для лабораторного режима.

Такое решение может иметь научное значение, но его интегральная эффективность требует дополнительного анализа.

24. Профиль эффективности
Как и в случае фундаментальности и оригинальности, рекомендуется сохранять не только итоговый класс, но и профиль.

Например:

техническая эффективность — чрезвычайно высокая;
экономическая — высокая;
масштабируемость — средняя;
надежность — стандартная;
генеративная — высокая.
Такой профиль значительно информативнее одного интегрального числа.

Он также позволяет избежать искусственной компенсации.

25. Ошибки оценки эффективности
Ошибка удобного показателя
Выбирается тот параметр, по которому изобретение выглядит лучше всего.

Ошибка несопоставимости
Сравниваются системы с разным качеством результата.

Ошибка лабораторного рекорда
Единичный эксперимент принимается за реальную производственную эффективность.

Ошибка масштаба
Не учитывается ухудшение при переходе к массовому производству.

Ошибка жизненного цикла
Игнорируются капитальные и эксплуатационные затраты.

Ошибка рыночной цены
Высокая цена продукта смешивается с высокой эффективностью.

Ошибка двойного счета
Одно улучшение несколько раз учитывается под разными показателями.

26. Процедура оценки эффективности
Рекомендуемая последовательность:

определить основную функцию изобретения;
установить релевантный стандартный класс;
выбрать первичный показатель;
зафиксировать ограничивающие показатели;
обеспечить функциональную эквивалентность;
провести технические измерения;
оценить экономический эффект;
провести анализ жизненного цикла;
проверить масштабируемость;
определить возможностный эффект;
оценить системные последствия;
оценить генеративную эффективность;
учесть неопределенность;
провести независимую репликацию;
определить подтвержденный диапазон превосходства;
присвоить предварительный или окончательный статус.
27. Связь эффективности с рангом изобретения
Эффективность является необходимым, но недостаточным условием высокого ранга.

В ранговой системе:

стандартное изобретение может обеспечивать обычный или значительный локальный выигрыш;

ароизобретение должно демонстрировать порядковое превосходство при высокой фундаментальности и оригинальности;

демиизобретение первого уровня должно соответствовать еще более высокому диапазону и одновременно создавать новый принцип или пространство возможностей;

высшие демиизобретения оцениваются относительно уже достигнутого демиургического фронтира.

Следовательно, эффективность никогда не должна использоваться отдельно от двух других базовых измерений.

28. Итоговый принцип трех независимых методик
Методики фундаментальности, оригинальности и эффективности должны применяться раздельно до этапа интеграции.

Это принципиально важно.

Сначала необходимо получить три самостоятельных профиля:

профиль фундаментальности;

профиль оригинальности;

профиль эффективности.

Только затем допускается определение общего ранга изобретения.

Такой порядок исключает ситуацию, когда исключительно высокая эффективность автоматически маскирует стандартную оригинальность или низкую фундаментальность.

Общая логика ранговой оценки приобретает следующий вид:

эталонный класс ; независимая оценка фундаментальности ; независимая оценка оригинальности ; независимая оценка эффективности ; проверка минимальных порогов ; интегральная ранговая классификация ; независимая верификация.

Таким образом, три методики образуют самостоятельные опоры единой системы определения ранга.

Фундаментальность показывает, насколько глубоко изменено пространство возможного.

Оригинальность показывает, насколько новым является способ этого изменения.

Эффективность показывает, насколько значим практический результат этого изменения.

Только их согласованное высокое значение позволяет обоснованно переходить от стандартного изобретательства к ароизобретательскому и далее к демиургическому диапазону.