Критерии оценки эффективности научных исследований. Оценка эффективности научных исследований

Одной из основных задач высших менеджеров организационно-производственной системы (ОПС) является своевременное обнаружение рыночных опасностей и возможностей проведение исследований, выбор вариантов действий в соответствии с реальными обстоятельствами и критериями. В случае обнаружения проблемы или с отчетной (раз в квартал, год) периодичностью проводятся исследования систем управления. Цель исследования определяется практической проблемой, стоящей перед ОПС. Цель - это то, ради чего проводят исследование.

Целью исследования будем называть идеальный результат этого исследования в будущем: обнаружение проблемы в деятельности; диагностика причин этой проблемы; доработка (устранение недостатков), модификация системы управленца объектом или процессом. Для того чтобы оценить полученный в исследовании результат, соотнести его с произведенными в процессе исследования затратами, выделяют научную и практическую эффективность исследования.

Понятие научной эффективности исследования больше связано с фундаментальными исследованиями. Научная эффективность исследования определяется приростом знаний в определенной области, имевшим место в результате исследования. Она может находить выражение в числе полученных в результате исследования патентов, авторских свидетельств публикаций, в рейтингах цитирования и др.

Для характеристики прикладных исследований чаще применяют понятие практической эффективности исследования. Научная эффективность исследования превращается в практическую в процессе внедрения научных знаний, полученных при исследованиях. Внедрение результатов исследования - важный элемент развития общества, ОПС. В рыночной экономике основным двигателем прикладных исследований является практическая проблема и необходимость ее решения на уровне, обеспечивающем конкурентоспособность,

Исследование эффективно, если достигает поставленных целей за определенное время, притом что расход ресурсов, риски не превышают плановые объемы. В каждом случае исследования систем управления необходимо прежде всего сформулировать проблему и цели. Процесс формулировки целей носит эвристический характер. Качество формулировки проблемы и цели может предопределять успех или неудачу исследования. Цель исследования систем управления - это те конкретные результаты, которые предполагается получить при определенных условиях, объекте, предмете, периоде времени, расходе ресурсов.

При формулировке цели исследования важно помнить, что цель всегда лежит вне самого исследования. Также необходимо, чтобы цель удовлетворяла ряду общих и специфических для конкретного исследования требований. В частности, нужно учитывать такие общие требования к целям:

они должны быть недвусмысленно сформулированы и понятны исполнителям;
должны быть измеряемы и иметь сроки исполнения;
должны мотивировать действия исполнителя в необходимом для ее достижения направлении;
цели исследований и отдельных исполнителей должны быть совместимы;
цель должна быть формализуема.

Чаще всего в качестве целей исследования систем выступает необходимость:

повышения эффективности целевого функционирования (производительности труда, дохода, прибыли и др.);
снижения расхода ресурсов (сырья, материалов, электроэнергии и др.) на единицу изготавливаемой продукции, включая снижение брака, отходов;
повышения безопасности путем устранения источников, обеспечения контроля риска (имущественного, финансового, экологического загрязнения внешней среды) в процессе хозяйственной деятельности и др.

В локальных исследованиях могут ставиться и более узкие цели. Например, снизить затраты на бухгалтерский учет, повысить эффект от использования данных управленческого учета в деятельности предприятия; повысить мотивацию персонала в подразделении; устранить причины или снизить амплитуду, частоту нежелательных колебаний отдельных параметров финансово-хозяйственной деятельности и др.

Часто в исследованиях участвует ряд организаций. Это требует правильного разделения (декомпозиции) единой цели на подцели участвующих в исследовании организаций. Для этого строят граф - дерево целей.

Графом называют фигуру, состоящую из точек, называемых вершинами, и соединяющих их отрезков, называемых ребрами. Графы могут быть связными и несвязными, ориентированными и неориентированными, содержать и не содержать циклы (петли). Выбор той или иной структуры графа определяется существом тех отношений между элементами, которые он должен выразить,

Граф-деревом называется связный ориентированный граф, не содержащий петель. Каждая пара его вершин соединяется единственным ребром. При проектировании исследований полезно строить граф-дерево проблем и (или) целей.

Деревом целей исследования называют граф-дерево, выражающее отношение между вершинами, являющимися подцелями (частными целями), подлежащими достижению в процессе исследований различных субъектов, предприятий или на различных этапах исследования на пути достижения цели всего исследования. Цель всего исследования является начальной вершиной граф-дерева целей.

Дерево целей, вершины которого ранжированы, т. е. выражены количественными оценками их важности, широко используется для количественной оценки приоритета различных направлений исследования. Построение дерева целей требует дополнительных исследований. Каждая из этих задач может быть решена методом экспертных оценок.

Цели становятся инструментом управления, когда они:

1) определены или сформулированы;
2) известны персоналу;
3) приняты работниками к исполнению.

При формулировке целей необходимо учитывать ограничения на объект, субъект исследования, выделяемые для этих исследований ресурсы (включая служебные площади, возможности электроснабжения, канализации и др.), время получения результата.

Особенно важно время получения результата. Результат исследования должен быть получен и практически использован до того момента, когда исследуемый процесс перейдет в неконтролируемое состояние или прекратит существование. Исследования, удовлетворяющие этому условию, называют исследованиями систем управления в реальном масштабе времени. Это особенно важно при управлении безопасностью. Однако это не всегда возможно технически при высокодинамичном объекте. Экономически такие исследования могут быть слишком дорогими.

Формализация целей имеет место при формировании критерия оценки эффективности системы. Сложность систем, а также различия в целях исследований породили различные варианты определений критерия. При оценке эффективности исследования критерий определяют как количественное отражение степени достижения системой поставленных перед ней целей.

В управлении исследованиями, как правило, удобней рассматривать критерий выбора предпочтительного варианта решения из ряда альтернативных. В соответствии с прогнозной эффективностью можно выделить следующие варианты решений по исследованию систем управления:

1) неэффективные, не позволяющие решить проблему;
2) рациональные, т. е. позволяющие решить проблему;
3) оптимальный вариант решения - вариант, позволяющий в определенном критерием смысле решить проблему исследования наилучшим образом или построить наилучшую систему исследований. Если неэффективных и рациональных решений может быть много, то оптимальное решение одно. При проведении исследования сложной системы управления в силу ее многогранности критерий, как правило, является вектором. При этом задача оптимизации сложной системы является многокритериальной задачей.

Критерий включает в себя в качестве компонентов параметры эффективности (эффекта).

Параметрами эффективности исследования называются относительные значения наиболее важных параметров системы и (или) исследования, а также отношения таких параметров, которые позволяют оценить качество решения проблемы и достижение поставленных перед системой целей. Например, параметрами эффективности будут оценки соотношения одного и того же параметра (пусть это будет расход топлива) до и после внедрения результатов исследования. Они отражают степень прогресса в результате исследования и (или) эффективность расхода ресурсов, в частности денежных средств, в процессе исследований. Они позволяют выбирать предпочтительные варианты изменений в объекте или самого процесса исследования.

В качестве параметров эффекта исследования будем называть абсолютные значения изменений важнейших параметров, например объема сэкономленного топлива в литрах, тоннах, рублях и т. п.

Один из известных подходов к синтезу критерия оценки исследования состоит в том, что один из параметров эффекта максимизируют или минимизируют, а на остальные накладывают ограничения.

Выбор варианта критерия формализует цели заказчика (или исполнителя) исследования. При этом основой являются практическая острота проблемы и ограничения по ресурсам, рискам, времени проведения исследований. Практическая и научная эффективность исследований систем управления неразрывно связана с полнотой, достоверностью и точностью полученных результатов.

Полнота результатов исследований - это отношение числа исследованных ситуаций управления, функций системы, ее контуров, элементов и глубины их изучения в процессе исследования к числу ситуаций, функций и т. д., не подвергшихся такой проверке в процессе исследований.

Точность результатов исследований - это возможные диапазоны (от минимальных до максимальных значений) нахождения реальных периметров по сравнению с оценками, полученными в ходе исследования.

Достоверность результатов исследований - это статистическая надежность полученных результатов. Недостоверность результатов определяет возможность появления результатов, выходящих за полученные в процессе исследования пределы, оценки точности.

Полноту, точность и достоверность результатов исследований необходимо учитывать при практическом использовании этих результатов, а также при оценке эффективности исследований.

Управление исследованиями и их своевременное и достаточное финансирование являются важнейшими проблемами практической деятельности высших руководителей ОПС.

Управление исследованиями помимо рассмотренных выше целеполагания, маркетинга (выбора методов и способов исследования) включает менеджмент исследования.

Менеджмент исследования состоит из планирования, организации, мотивации и контроля исследования. При существовании определенной специфики менеджмента исследований общие подходы к этим составляющим в основном соответствуют общепринятым.

Основные положения изложенного материала

В основе учения о функциях управления лежит процессный подход к менеджменту. В рамках указанного подхода управление рассматривается как процесс, включающий в себя непрерывную серию взаимосвязанных управленческих действий, т. е. функций.
Основу системного подхода составляет технология управления, т. е. приемы, способы и порядок осуществления процесса управления.
В наиболее общем виде функция управления представляет собой обособленный однородный вид деятельности, направленной на достижение целей функционирования организации.
В наиболее общем виде планирование можно охарактеризовать как процесс, включающий в себя разработку основных направлений деятельности и развития организации, определение потребности в ресурсах и средствах, необходимых для реализации указанных направлений, а также выбор методов и способов осуществления намеченных мероприятий.
План - это документ, отражающий систему взаимосвязанных решений, направленных на достижение желаемого результата. Он содержит такие этапы, как: цели и задачи; пути и средства их реализации; ресурсы, необходимые для выполнения поставленных задач; пропорции, т. е. поддержание пропорциональности между отдельными элементами производства; организацию выполнения плана и контроль.
Технико-экономическое планирование предусматривает разработку целостной системы показателей развития техники и экономики предприятия в их единстве и взаимозависимости как по месту, так и по времени действия.
Оперативно-производственное планирование является следствием технико-экономического и представляет собой его последующие развитие и завершение.
Тактическое планирование заключается в обосновании задач и средств, необходимых для достижения заранее установленных или традиционных целей (например, завоевать лидерство на рынке сбыта продукции).
Стратегическое планирование включает выбор и обоснование средств, задач и целей для достижения заданных или текущих для предприятия результатов.
Реактивное планирование базируется на анализе предшествующего опыта и истории развития производства и чаще всего опирается на старые организационные формы и сложившиеся традиции. Такое планирование рассматривает производственные проблемы по отдельности, а не как соответствующую систему, и потому не учитывает взаимодействие целого и его отдельных частей.
Инактивное планирование ориентируется на существующее положение предприятия и не предусматривает как возвращения к прежнему состоянию, так и продвижения вперед. Его основными целями являются выживание и стабильность производства.
Преактивное планирование направлено на осуществление непрерывных изменений в различных сферах деятельности предприятий (фирм). В своем стремлении к лучшему преактивисты опираются на все достижения науки и техники, широко применяют эксперимент и прогнозирование, но мало используют накопленный опыт.
Интерактивное планирование заключается в проектировании желаемого будущего и изыскании путей его построения. Поэтому такое планирование сосредотачивается на повышении результативности со временем, его цель максимизировать свою способность обучаться и адаптироваться или развиваться.
Как функция управления организация представляет собой вид управленческой деятельности, посредством которой система управления приспосабливается для выполнения задач, сформулированных на этапе планирования.
Организация исследования систем управления требует учета ряда системных характеристик, к которым относятся: потребность в исследованиях; объект и предмет исследования; ресурсы для проведения исследований; эффективность исследований; результаты исследований.
Диагностика систем управления - это процесс установления и изучения признаков, характеризующих состояние системы управления, в целях предсказания возможных отклонений и предотвращения нарушений нормального режима их работы. Диагностика является своеобразным механизмом саморегулирования в системе, обеспечивающим обратную связь в кон- туре управления.
Основная цель диагностики - ориентация управленческого процесса на достижение всех целей, стоящих перед предприятием.
Стратегическая диагностика несет ответственность за обоснованность стратегических планов и ориентирована на внешнюю и внутреннюю среду системы.
Оперативная диагностика несет ответственность за достижение краткосрочных целей и ориентирована на экономическую эффективность и рентабельность деятельности системы.
Понятие научной эффективности исследования больше связано с фундаментальными исследованиями. Научная эффективность исследования определяется приростом знаний в определенной области, имевшим место в результате исследования. Она может находить выражение в числе полученных в результате исследования патентов, авторских свидетельств публикаций, в рейтингах цитирования и др.
Для характеристики прикладных исследований чаще применимо понятие практической эффективности исследования. Научная эффективность исследования превращается в практическую в процессе внедрения научных знаний, полученных при исследованиях.

Вопросы и задания для самоконтроля

1. В чем сущность процессного подхода к менеджменту?
2. Дайте определение технологии управления.
3. Что такое функция управления?
4. Перечислите основные задачи планирования исследования систем управления.
5. В чем разница между технико-экономическим и оперативно-производственным планированием?
6. Для чего осуществляется построение дерева целей?
7. Перечислите основные этапы планирования.
8. В чем сущность организации процесса исследования систем управления?
9. Какие характеристики учитываются в процессе организации исследования систем управления?
10. Перечислите основные формы организации проведения исследования систем управления.
11. Дайте определение диагностики систем управления.
12. В чем основная цель диагностики?
13. Проведите сравнительный анализ стратегической и оперативной диагностики систем управления.
14. В чем сущность диагностики финансово-хозяйственного состояния организации?
15. Каково предназначение организационной диагностики?
16. Раскройте сущность понятия “научная эффективность исследования систем управления”.
17. Каким образом определяется прикладная эффективность исследования систем управления?
18. В чем различие между критериями и параметрами эффективности исследования систем управления?
19. В чем выражается полнота и точность результатов исследования?
20. Каким образом можно оценить достоверность полученных результатов исследования систем управления?

Апологеты реформы науки утверждают, что важнейшим показателем эффективности научного исследования является индекс цитируемости в иностранных базах данных научного цитирования. Многие уже высказались с критикой подобного подхода, основная проблема заключается в том, что в этих базах данных индексируются в основном публикации на иностранных языках. Я лишь добавлю пару своих соображений на эту тему.

Цитируемость в наших реалиях зачастую приобретает форму откровенного плагиата. Но даже если на учёного ссылаются со всеми правилами научного цитирования, его не всегда можно засчитать в «копилку» автора.

К примеру, в самой известной книге «Грядущее постиндустриальное общество» классика американской политической мысли, одного из «отцов-основателей» теории постиндустриального общества Дэниела Бэлла едва ли не половина ссылок на работы Карла Маркса.

Таким образом, Бэлл «повышает» индекс цитируемости Маркса, но вместе с тем разносит его теорию в пух и прах.

В России с недавнего времени работает отечественная база научного цитирования под названием РИНЦ (Российский индекс научного цитирования). Материалов в ней пока не так много, чтобы считать этот сайт полноценной научной библиотекой, в отличие от зарубежных аналогов, вместе с тем в формах академической отчётности уже фигурирует соответствующая графа. Министерство вынуждает научных сотрудников «мериться индексами», тот, у кого он окажется выше – получит надбавку.

Согласно этой базе, например, у одного из самых гениальных современных учёных нашей страны Григория Перельмана я не нашёл ни одной публикации (и соответственно ни одного цитирования).

Эффективно?

Приведу другой пример из науки о международных отношениях, которая лично мне ближе, чем естественнонаучные материи. Абсолютным и непререкаемым авторитетом в этой сфере является академик Е.М.Примаков - в прошлом директор Института мировой экономики и международных отношений. Евгений Максимович широко известен в России и во всём мире, причем не только как учёный.

Согласно российской базе научного цитирования у него около 40 публикаций. Получается, что по таким показателям эффективности я в свои 30 лет совсем скоро «догоню» Евгения Максимовича!

Я уверен, что важнейшим результатом фундаментального исследования является не публикация, не индекс цитирования, а идея, новое знание. Именно создание новой идеи является результатом научной деятельности. На основе идеи нельзя придумать показатель эффективности. А «кражу» идеи не распознает ни один «антиплагиат». Однако если измерять эффективность количеством публикаций и цитирований - вся научная деятельность будет направлена не на создание идей, а на повторение одной и той же информации в разных публикациях для того, чтобы увеличить индекс цитирования. Проведение научного исследования и получение нового знания в этом случае будет вторично.

«Оценить» значение идеи может только время. Сегодня количество различных форм отчётности в академии превышает все пределы разумного. Всё это вынуждает научных сотрудников (в первую очередь администрации) направлять свои усилия не на получение результата, а на улучшение показателей эффективности для отражения этого в отчёте. Именно в этом, в том числе заключается проблема бюрократии, о которой неоднократно говорил президент Академии в ходе своей предвыборной программы и обсуждения законопроекта.

Особенно хочу отметить, что измерять эффективность научной деятельности надо с учётом специфики тех исследований, которыми занимается исследователь или институт. Гуманитарные исследования, которыми занимаюсь лично я и мои коллеги, предполагают получение совершенно иных результатов, по сравнению с естественнонаучными исследованиями. Взываю к здравому смыслу, и очень надеюсь, что те, кто будет разрабатывать показатели эффективности для реформированной академии учтут вышесказанное.

«Требовать» от Академии новых результатов, конечно, надо. Причём требовать надо именно новых знаний, новых идей, а не перепостов своих публикаций на иностранных языках, не цитирований непонятно кем и где, и не коммерческой эффективности. Требовать новых результатов надо не для отчётов, но для того, чтобы воспользоваться этими результатами, и принести заметную пользу отечественной экономике.

Вместе с тем, несмотря на критику, и сегодня ни одна научная дискуссия не обходится без участия Маркса вне зависимости от того, спорят с ним или соглашаются с его аргументами.

ВОПРОС 10. Особенности труда в торговле. Производительность и эффективность труда работников

ГЛАВА 1. ПРАКТИЧЕСКАЯ ЭТИКА И ПРАКТИЧЕСКАЯ ПСИХОЛОГИЯ КАК ПРОФЕССИОНАЛЬНАЯ ДЕЯТЕЛЬНОСТЬ..........................................................

Научная эффективность исследования определяется приростом знаний в определенной области, имевшем место в результате исследования.

Она может находить выражение в числе полученных в результате исследования патентов, авторских свидетельств, публикаций, рейтингах цитирования и др.

Для характеристики прикладных исследований чаще применимо понятие практической эффективности исследования.

Научная эффективность исследования превращается в практическую в процессе внедрения научных знаний, полученных при исследованиях. Внедрение результатов исследования - важный элемент развития общества, организационно-производственной системы.

В рыночной экономике основным двигателем прикладных исследований (а именно к таким относится большинство проблем исследования экономических систем) является практическая проблема и необходимость ее решения на уровне, обеспечивающем конкурентоспособность.

Эффективное исследование - это исследование, достигающее поставленные цели за определенное время при том, что расход ресурсов, риски не превышают плановые объемы.

Эффективность исследования зависит от факторов исследовательского потенциала.

Исследовательский потенциал отражает возможности использования ресурсов и степень достижения поставленной цели.

Факторы исследовательского потенциала представлены тремя группами:

1) методология;

2) ресурсы;

3) организационные возможности.

Методологическая готовность исследовательского потенциала проявляется в наличии цели и миссии исследования, наличия концепций развития фирмы, опыта исследований и возможностей использования необходимых методов исследования, соответствующих технических средств.

Фактор ресурсов заключается в наличии необходимых ресурсов персонала, экономических, материально-технических, информационных, ресурсов времени.

Исследовательский потенциал управления включает в себя организационные возможности его проведения. Они проявляются в наличии организационной культуры и типа организации, интеллектуальном потенциале исследователей систем управления.

Эффективность исследования зависит от принципов его построения и осуществления:

1) Принцип объективности . Согласно этому принципу, в любом исследовании необходимо искать объективные факторы, связи, зависимости. Это определяет успех исследования. Но использование данного принципа вовсе не означает, что надо исключить все субъективное. Многое в исследовании определяется интуицией, ее необъяснимым влиянием на поведение человека, на поиск истины. Принцип объективности это принцип соизмерения, сопоставления факторов с объективной реальностью, это возвращение к объективному, в конечном результате размышлений, анализа идей, мыслей, позиций.

2)Принцип системности - это принцип поиска и определения связей, целостности, сопоставления свойств, нахождения границ внутренней и внешней среды. Этот принцип позволяет концентрировать исследования на главном, оценивать связи, разграничивать их на внешние и внутренние, понимать свойство, как проявление целого в одном случае и как проявление отдельного - в другом.

3)Принцип последовательности требует проведения исследования по определенной, заранее разработанной технологии. В использовании этого принципа большое значение имеет ответ на вопрос: с чего начать и как двигаться к результату?

4)Принцип целеустремленности означает, что любое исследование должно иметь вполне определенную цель. Исследование - это не только разрешение возникшей проблемы, но и определение, к какой цели может вести это разрешение, в какой мере оно способствует достижению цели. Цель определяет выбор решений и последовательность их разработки, цель интегрирует деятельность в самых сложных ее вариантах: многоаспектность, совместное исследование, разветвленность исследования, сложность проблемы и т.д.

5)Принцип свободы мышления определяет необходимость снятия ограничений в полете мысли, фантазии, воображения, идей. Принцип управления мышлением предполагает, что мышление, как и всякий процесс, должно быть не спорадическим. Он ведет к эффективности исследования. Это может быть управление процессом индивидуального мышления или процессом групповой мыслительной деятельности. Как и всякая деятельность, исследование строится на использование определенных ресурсов, величина и структура которых в значительной мере определяют его эффективность. Ресурсы нельзя использовать бездумно, но и стремясь получить необходимый результат, нельзя бездумно ограничивать исследования в необходимых ресурсах, отсюда возникает важный принцип гибкой экономии ресурсов. В некоторых исследованиях заранее очень трудно предусмотреть и рассчитать достаточно точно, сколько ресурсов понадобится для достижения необходимого результата. Поэтому расчет ресурсов надо делать с запасом, понимая, что и результат исследования не всегда достаточно предсказуем, иногда он может быть значительнее ожидаемого. Тогда и при перерасходовании ресурсов эффективность исследования будет все равно высокой.

6)Принцип качественной и количественной определенности исследования заключается в том, что, по возможности, исследования надо проводить, опираясь на количественные измерители параметров, показатели, но при этом не терять качество изучаемых явлений, т.е. совокупность тех свойств, которые определяют их суть и особенности.

7) Принцип обеспечения исследования фактами заключается в том, что исследование необходимо строить на фактах и отбирать факты соответствующим образом. В этом основа и объективности исследования, и его успешности, а в конечном итоге и эффективности.

8)Принцип оценки трудоемкости. Суть его заключается в том, что всякое исследование должно быть рассчитано по трудоемкости его проведения. От этого зависит и его организация, и рациональное использование всех ресурсов, а, следовательно, и эффективность.

При оценке эффективности исследованиякритерий эффективности определяют как количественное отражение степени достижения системой поставленных перед ней целей.

В управлении исследованиями удобней рассматривать критерий как правило выбора предпочтительного варианта решения из ряда альтернативных.

В соответствии с прогнозной эффективностью можно выделить следующие варианты решений по исследованию систем управления:

1) неэффективные, не позволяющие решить проблему;

2) рациональные, т.е. позволяющие решить проблему;

Если неэффективных и рациональных решений может быть много, то оптимальное решение одно.

Вопросы для самопроверки

1. С какой целью и как разрабатывается гипотеза научного исследования?

2. Перечислите этапы стадии «исследование»

3. С какой целью проводится ТЭО исследования?

4. Перечислите основные формы представления результатов научных исследований.

5. Перечислите основные формы апробации результатов научных исследований.

6. В чем суть отличий реферата от аннотации?

7. Какие бывают виды рефератов?

8. Что такое практическая эффективность исследований?

9. Критерии научной эффективности исследований?

Под экономической эффективностью научных исследований в целом понимают снижение затрат общественного и живого труда на производство продукции в той отрасли, где внедряют законченные научно-исследовательские работы и опытно-конструкторские разработки (НИР и ОКР). Основные виды эффективности научных исследований:

1) экономическая эффективность - рост национального дохода, повышение производительности труда, качества продукции, снижение затрат на научные исследования;

2) укрепление обороноспособности страны;

3) социально-экономическая эффективность - ликвидация тяжелого труда, улучшение санитарно-гигиенических условий труда, очистка окружающей среды и т. д;

4) престиж отечественной науки.

Наука является наиболее эффективной сферой капиталовложений. В мировой практике принято считать, что прибыль от капиталовложений в нее составляет 100-200% и намного выше прибыли любых отраслей. По данным зарубежных экономистов, на один доллар затрат на науку прибыль в год составляет 4-7 долларов и больше. В нашей стране эффективность науки также высокая. На 1 грн., затраченную на НИР и ОКР, прибыль составляет 3-8 грн.

С каждым годом наука обходится обществу все дороже. На нее расходуют огромные суммы. Поэтому в экономике науки возникает и вторая проблема - систематическое снижение народнохозяйственных затрат на исследования при возрастающем эффекте от их внедрения. В связи с этим под эффективностью научных исследований понимают также по возможности более экономное проведение НИР.

Хорошо известно, какое большое значение ныне придается вопросам ускоренного развития науки и НТП. Делается это по глубоким стратегическим причинам, которые сводятся к тому объективному факту, что наука и система ее приложений стала реальной производительной силой, наиболее мощным фактором эффективного развития общественного производства.

Есть два кардинально различных пути ведения дел в экономике: экстенсивный путь развития и интенсивный. Путь экстенсивного развития - это расширение заводских площадей, увеличение числа станков и т. д. Интенсивный путь предполагает, чтобы каждый завод с каждого работающего станка, сельскохозяйственное предприятие с каждого гектара посевных площадей получали все больше и больше продукции. Это обеспечивается использованием новых научно-технических возможностей: новых средств труда, новых технологий, новых знаний. К интенсивным факторам относится и рост квалификации людей, и вся совокупность организационных и научно-технических решений, которыми вооружается современное производство.

Сегодня, примерно, каждая гривна, вложенная в науку, в НТП и освоение нововведений (новой техники, новых технологий) в производстве, дает в четыре раза больший эффект, чем та же гривна, вложенная в экстенсивные факторы.

Это очень существенное обстоятельство. Из него вытекает, что и впредь наша хозяйственная политика будет направлена на то, чтобы во всех сферах общественного производства решать проблемы дальнейшего развития преимущественно за счет интенсивных факторов. При этом особая роль отводится науке, а на саму науку распространяется то же самое требование. Сошлемся на характерные цифры. За последние 40-50 лет количество новых знаний увеличилось примерно в два-три раза, в то же время объем информации (публикаций, различной документации) увеличился в восемь-десять раз, а объем средств, отпускаемых на науку, - более чем в 100 раз. Эти цифры заставляют задуматься. Ведь рост ресурсов, затрачиваемых на науку, не самоцель. Следовательно, научную политику надо менять, необходимо решительно повысить эффективность работы научных учреждений.

Есть еще одно важное обстоятельство. В данном случае нас интересует не сам по себе прирост новых знаний, а прирост эффекта в производстве. Мы должны проанализировать: все ли нормально с пропорциями между получением знаний и их применением на производстве. Нужно опережающе высокими темпами увеличивать вложения в мероприятия по освоению результатов НТП в производство.

Существует некоторая теоретическая модель, построенная из соображений наиболее полного использования новых знаний, новых научных данных. В соответствии с этой моделью, если ассигнования в области фундаментальных исследований принять за единицу, то соответствующие показатели составят: по прикладным исследованиям - 4, по разработкам - 16, по освоению нововведений в производство - 250. Эта модель построена академиком В.М. Глушковым исходя из того, что все разумное (из новых идей, сведений, возможностей), полученное в сфере фундаментальных исследований, будет использовано. Для этого будет достаточно наличных мощностей прикладных наук. Затем возможности практического применения будут реализованы в виде новых технологий, новых конструкций и т. п., теми, кто проектирует, ведет разработки. И у них, в свою очередь, будет достаточно мощностей, чтобы все это принять и полностью пустить в дело. Наконец, необходимо иметь достаточно капиталовложений и свободных мощностей, предназначенных для освоения нововведений на производстве, чтобы освоить и реализовать все объективно необходимые нововведения.

Если суммарные затраты на фундаментальные и прикладные исследования, а также на опытно-конструкторские разработки принять за единицу, то отношение между вложениями в производство новых знаний и вложениями в освоение этих знаний народным хозяйством составит 1:12. А в действительности такое соотношение 1:7. Это свидетельствует о том, что в народном хозяйстве зачастую нет свободных мощностей, не хватает возможностей для маневра (в США такое соотношение 1:11).

В современной науке каждый четвертый - руководитель. Это действительный факт. Например, на Украине на 150 тыс. научных работников 40 тыс. руководителей (директоров, заместителей, руководителей отделов, лабораторий, кафедр, групп и пр.). Вот и получается, что каждый четвертый, занятый в науке, - руководитель. Руководителей в науке больше, чем физиков, химиков, математиков и пр., отдельно взятых. Но математиков, физиков, химиков и прочих готовят вузы (и профессиональный уровень их знаний, как правило, очень высок). Руководству же научной деятельностью их не обучали. Этому они учатся сами и самым непродуктивным способом - на своих ошибках. Решение этого вопроса тоже сможет поднять эффективность научных исследований.

Известно, что время между вложением в науку и отдачей от науки в экономику измеряется в нашей стране девятью годами. Это довольно большой срок. Каждый год сокращения этого срока означает выигрыш в 5 млрд. грн. Только на год быстрее - и получаем 5 млрд. грн. без каких-либо дополнительных затрат. В дальнейшем этот выигрыш будет еще значительнее.

Одним из путей повышения эффективности научных исследований является использование так называемых попутных или промежуточных результатов, которые зачастую совсем не используются или используются поздно и недостаточно полно.

Например, космические программы. Чем они оправдываются экономически? Конечно, в результате их разработки была улучшена радиосвязь, появилась возможность дальних передач телевизионных программ, повышена точность предсказания погоды, получены большие научные фундаментальные результаты в познании мира и т. д. Все это имеет или будет иметь экономическое значение.

На эффективность исследовательского труда прямо влияет оперативность научных изданий, прежде всего периодических. Анализ сроков нахождения статей в редакциях отечественных журналов показал, что они задерживаются вдвое дольше, чем в аналогичных зарубежных изданиях. Для сокращения этих сроков, по-видимому, целесообразно в нескольких журналах экспериментально проверить новый порядок публикаций: печатать только рефераты статей объемом до 4-5 страниц, а полные тексты издавать методом безнаборной печати в виде оттисков и высылать по запросам заинтересованных лиц и организаций.

Известно, что темпы роста инструментальной вооруженности современной науки должны примерно в 2,5-3 раза превышать темпы роста численности работающих в этой сфере. В целом по стране этот показатель еще недостаточно высок, а в некоторых научных организациях он заметно меньше единицы, что приводит к фактическому снижению КПД интеллектуальных ресурсов науки.

Современные научные приборы морально изнашиваются столь быстро, что за 4-5 лет, как правило, безнадежно устаревают. При нынешних темпах НТП абсурдной выглядит так называемая бережная (по нескольку часов в неделю) эксплуатация прибора.

Рационально приобретать приборов меньше, но самых совершенных, и загружать их максимально, не боясь износа, а через 2-3 года интенсивной эксплуатации заменять новыми, более современными.

Министерство промышленности, обновляя свою продукцию примерно каждые пять и более лет, лишь 10-13% ее выпускает на уровне мировых показателей. Среди причин этого явления важное место занимает распыленность и слабость научного потенциала соответствующих предприятий, делающие их не подготовленными к восприятию существенно нового, а тем более к разработке его силами своих ученых и инженеров.

В современной науке вопросом вопросов являются кадры. Из заводской науки вышла целая плеяда выдающихся ученых, в том числе, например, металлург академик И. П. Бардин и значительная часть творцов современной новейшей техники.

Многие заводские коллективы исследований превратились в подлинные научные школы. Так, осуществленная за последние годы на одном из крупнейших заводов г. Запорожья широкая программа исследований позволила не только преобразить целую отрасль производства, но и вырастить из числа заводских специалистов около 30 кандидатов и 5 докторов наук. Большим признанием пользуются научные школы специалистов киевского завода "Арсенал" и Харьковского турбинного завода.

Вместе с тем следует признать, что в целом индустриальный сектор науки еще очень слабо обеспечен высококвалифицированными кадрами исследователей. На каждую сотню центральных заводских лабораторий приходится лишь один кандидат наук. Большинство заводских научных подразделений, по масштабам работ сравнимых с обычными НИИ, имеют в несколько раз меньшее число докторов и кандидатов наук.

Особого внимания заслуживает проблема целевой подготовки кадров для индустриального сектора науки.

Для оценки эффективности исследований применяют разные критерии, характеризующие степень их результативности.

Фундаментальные исследования начинают отдавать капиталовложения лишь спустя значительный период после начала разработки. Результаты их обычно широко применяют в различных отраслях, иногда в тех, где их совсем не ожидали. Поэтому подчас нелегко планировать результаты таких исследований.

Фундаментальные теоретические исследования трудно оценить количественными критериями эффективности. Обычно можно установить только качественные критерии: возможность широкого применения результатов исследований в различных отраслях народного хозяйства страны; новизна явлений, дающая большой толчок для принципиального развития наиболее актуальных исследований; существенный вклад в обороноспособность страны; приоритет отечественной науки; отрасль, где могут быть начаты прикладные исследования; широкое международное признание работ; фундаментальные монографии по теме и цитируемость их учеными различных стран.

Эффективность прикладных исследований оценить значительно проще. В этом случае применяют различные количественные критерии.

Об эффективности любых исследований можно судить лишь после их завершения и внедрения, т. е. тогда, когда они начинают давать отдачу для народного хозяйства. Большое значение приобретает фактор времени. Поэтому продолжительность разработки прикладных тем по возможности должна быть короче. Лучшим является такой вариант, когда продолжительность их разработки до трех лет. Для большинства прикладных исследований вероятность получения эффекта в народном хозяйстве в настоящее время превышает 80%.

Как оценить эффективность исследования коллектива (отдела, кафедры, лаборатории и т. д.) и одного научного работника?

Эффективность работы научного работника оценивают различными критериями: публикационным, экономическим, новизной разработок, цитируемостью работ и др.

Публикационным критерием характеризуют общую деятельность - суммарное количество печатных работ, общий объем их в печатных листах, количество монографий, учебников, учебных пособий. Этот критерий не всегда объективно характеризует эффективность научного работника. Могут быть случаи, когда при меньшем количестве печатных работ отдача значительно больше, чем от большего количества мелких печатных работ. Экономическую оценку работы отдельного научного работника применяют редко. Чаще в качестве экономического критерия используют показатель производительности труда научного работника (выработку в тыс. грн. сметной стоимости НИР). Критерий новизны НИР - это количество авторских свидетельств и патентов. Критерий цитируемости работ ученого представляет собой число ссылок на его печатные работы. Это второстепенный критерий.

Эффективность работы научно-исследовательской группы или организации оценивают несколькими критериями: среднегодовой выработкой НИР, количеством внедренных тем, экономической эффективностью от внедрения НИР и ОКР, общим экономическим эффектом, количеством полученных авторских свидетельств и патентов, количеством проданных лицензий или валютной выручкой.

Среднегодовую выработку НИР, ОКР определяют по формуле

где С о - общая сметная стоимость НИР и ОКР, тыс. грн;

Р - среднесписочное число работников основного и подсобного персонала отдела, кафедры, лаборатории, НИИ.

Обычно Я п рассчитывают за год, поскольку установить сметные расходы НИР за месяц или квартал можно лишь ориентировочно. Среднегодовая выработка НИР и ОКР на одного работника колеблется от 3 до 7 тыс. грн.

Критерий внедрения К в законченных тем устанавливают в конце календарного года суммированием законченных работ т к. Внедрение темы оценивают степенью завершения тематического плана.

Относительный критерий внедрения законченных тем

где т - общее количество разрабатываемых тем. Критерий экономической эффективности

где Э, 3 - соответственно эффект от внедрения темы и затраты на ее выполнение и внедрение, тыс. грн.

Экономический эффект от внедрения - основной показатель эффективности научных исследований - зависит от затрат на внедрение, объема внедрения, сроков освоения новой техники и многих других факторов.

Эффект от внедрения рассчитывают за весь период, начиная от времени разработки темы до получения отдачи. Обычно продолжительность такого периода прикладных исследований составляет несколько лет. Однако в конце его можно получить полный народнохозяйственный эффект.

Уровень новизны прикладных исследований и разработок коллектива характеризуют критерием К & , т. е. числом завершенных работ, по которым получены авторские свидетельства и патенты. Критерий К л характеризует абсолютное количество свидетельств и патентов. Более объективными являются относительные показатели, например количество свидетельств и патентов, отнесенных к определенному количеству работников Р данного коллектива (Р = 100, 1000) или к числу тем, разрабатываемых коллективом, которые подлежат оформлению свидетельствами и патентами.

Если коллектив НИИ выполнил разработки и осуществлена продажа их за границей, то эффективность этих разработок оценивают относительным показателем

Экономический эффект от внедрения научных исследований определяют по известной методике из курса "Экономика транспорта". Различают три вида экономического эффекта: предварительный, ожидаемый и фактический.

Предварительный экономический эффект устанавливается при обосновании темы научного исследования и включении ее в план работ. Рассчитывают его по ориентировочным, укрупненным показателям с учетом прогнозируемого объема внедрения результатов исследований в группу предприятий данной отрасли.

Ожидаемый экономический эффект вычисляют в процессе выполнения НИР. Его условно относят (прогнозируют) к определенному периоду (году) внедрения продукции в производство. Ожидаемая экономия - более точный экономический критерий по сравнению с предварительной экономией, хотя в некоторых случаях она является также ориентировочным показателем, поскольку объем внедрения можно определить лишь ориентировочно. Ожидаемый эффект вычисляют не только на один год, но и на более длительный период (интегральный результат). Ориентировочно такой период составляет до 10 лет от начала внедрения для новых материалов и до 5 лет для конструкций, приборов, технологических процессов.

Фактический экономический эффект определяется после внедрения научных разработок в производство, но не ранее, чем через год. Расчет его производят по фактическим затратам на научные исследования и внедрение с учетом конкретных стоимостных показателей данной отрасли (предприятия), где внедрены научные разработки. Фактическая экономия почти всегда несколько ниже ожидаемой: ожидаемую определяют НИИ ориентировочно (иногда с завышением), фактическую - предприятия, на которых осуществляется внедрение.

Наиболее достоверным критерием экономической эффективности научных исследований является фактическая экономия от внедрения.

Тема 16. Научная и практическая эффективность исследования

16.1. Понятие эффективности исследования. Исследовательский потенциал управления.

16.2. Научная и практическая эффективность исследования.

16.3. Параметры эффективности исследования.

16.4. Роль оценивания в исследовании систем управления.

16.5. Принципы оценивания исследования систем управления.

16.6. Виды оценки параметров управления.

16.1. Понятие эффективности исследования. Исследовательский потенциал управления.

Эффективность исследования - это определение или нахождение такого варианта проведения исследования, который кратчайшим путем ведет к успеху. Но это определение можно дополнить более точным.

Эффективность исследования - это одна из его характеристик, которая показывает как соотносятся затраты усилий (или ресурсов) на его проведение и результат (или степень достижения цели).

Все факторы, определяющие эффективность исследования, можно рассмотреть в двух группах: факторы исследовательского потенциала управления и принципы его использования.

Исследовательский потенциал управления.

Понятие исследовательского потенциала управления отражает возможности использования ресурсов и достижения поставленных целей. Ведь наличие необходимых ресурсов еще не ведет автоматически к эффективности. Использование ресурсов зависит и от их структуры, доступности, цели, по которой используются ресурсы, мотивации их рационального использования и пр. Все это в совокупности характеризует понятие исследовательского потенциала. Его величина и качество, его реализация также определяют достижение эффективности.
Все факторы, характеризующие исследовательский потенциал управления, можно представить по трем группам: факторы методологической готовности, факторы наличия и структуры ресурсов и факторы организационных возможностей.

Методологическая готовность проявляется в наличии цели и миссии исследования. Здесь большое значение имеют обоснованность цели, научный подход к ее формулированию и постановке, понимание и приятие цели исследовательской группой или вообще всем коллективом фирмы, интеграционными свойствами цели.

Миссия исследования рассматривается как доминанта его проведения, обеспечивающая последовательное движение к цели. Она помогает выбрать ограничения в движении к цели и приоритеты на каждом из этапов этого движения. Миссия должна отвечать на вопрос: зачем проводиться исследования, позволяет ли реальность достичь цель?

Методологическая готовность определяется также концепцией развития фирмы, разработанной по цели и миссии. Это комплекс положений, отражающих тенденции развития. Концепция теснейшим образом связана с целью и миссией, ибо включает в себя и то и другое, кроме того характеризует их конкретизацию, определяет ключевые положения программы исследования .

Большое значение имеет также опыт исследования. Систематическое проведение исследовательской работы способствует накоплению такого опыта и повышает потенциал эффективности исследовательской деятельности . Опыт экономит время, оберегает от ошибок и облегчает многие операции.

Многие виды исследования зависят от информационной базы его проведения. Чтобы увидеть динамику процессов развития, проводить сравнительный анализ, определять тенденции, выбирать наиболее удачные решения, надо иметь необходимое количество накопленной информации. Эта потребность стимулирует систематическое проведение исследования.
Невозможно провести исследование, не пользуясь той или иной методикой моделирования и оценок процессов или явлений. Но методики бывают различными. Какими из них обладают и пользуются исследователи или менеджер, как разрабатываются собственные методики это тоже характеризует методологический потенциал исследования.

Наконец, следует указать и на возможности использования необходимых методов исследования. Эти возможности определяются их доступностью, наличием соответствующих технических средств, квалификацией исследователей.

Факторы методологической готовности действуют не только в определенном наборе и совокупности, но и в их соотношении и системности.
Следующая группа факторов исследовательского потенциала - наличие и использование ресурсов.

Любое исследование нуждается в ресурсах. Необходимы ресурсы персонала, экономические, материально-технические, информационные, ресурсы времени. Можно также говорить и о ресурсах фактологических. Они отражают наличие необходимых фактов, возможностей их систематизации.
Далее более подробно будет рассмотрено фактологическое обеспечение исследования и его отличие от информационного. Здесь лишь достаточно сказать, что информационные и фактологические ресурсы являются взаимодополняющими.

В исследовании необходимы различные ресурсы и в определенном их соотношении. Ресурсы могут и должны быть взаимозаменяемыми, но до определенных пределов.

Исследовательский потенциал управления включает в себя и организационные возможности его проведения. Они проявляются в наличии необходимой организационной культуры и типа организации. Важную роль также играет позитивный и негативный организационный опыт, позволяющий успешно выбрать тип организации и организовать исследование.

Всякая организация имеет определенную инфраструктуру, которая также влияет на проведение исследования.

Следует здесь назвать и такой фактор, как интеллектуальный потенциал менеджера или исследователя. Его можно отнести и к ресурсам и к методологической готовности, но он также играет важную роль в реализации организационных возможностей. Организация исследования - это организация интеллектуальной деятельности, и она определяется в значительной мере интеллектуальным потенциалом исследователя.
В дальнейшем более подробно будут рассмотрены факторы оценивания, фактологического обеспечения исследования, мышления менеджера-исследователя, креативного образования менеджера, которое и определяет его интеллектуальный потенциал.

16.2. Научная и практическая эффективность исследования.

Научная эффективность исследования определяется приростом знаний в определенной области, имевшем место в результате исследования. Она может находить выражение в числе полученных в результате исследования патентов, авторских свидетельств , публикаций, рейтингах цитирования и др.

Для характеристики прикладных исследований чаще применимо понятие практической эффективности исследования .

В рыночной экономике основным двигателем прикладных исследований (а именно к таким относится большинство проблем исследования систем управления) является практическая проблема и необходимость ее решения на уровне, обеспечивающем конкурентоспособность.

В более широком смысле эффективность исследования - это одна из его характеристик, которая показывает как соотносятся затраты усилий (или ресурсов) на его проведение и результат (или степень достижения цели).
Эффективность исследования зависит от факторов исследовательского потенциала управления. Исследовательский потенциал отражает возможности использования ресурсов и степень достижения поставленной цели.

Факторы исследовательского потенциала представлены тремя группами:

1) методология;

2) ресурсы;

3) организационные возможности.

Эффективность исследования зависит от принципов его построения и осуществления .

Среди принципов следует назвать, прежде всего, принцип объективности . Согласно этому принципу, в любом исследовании необходимо искать объективные факторы, связи, зависимости. Это определяет успех исследования. Но использование данного принципа вовсе не означает, что надо исключить все субъективное. Многое в исследовании определяется интуицией, ее необъяснимым влиянием на поведение человека, на поиск истины. Принцип объективности это принцип соизмерения, сопоставления факторов с объективной реальностью, это возвращение к объективному, в конечном результате размышлений, анализа идей, мыслей, позиций.

Принцип системности - это принцип поиска и определения связей, целостности, сопоставления свойств, нахождения границ внутренней и внешней среды. Этот принцип позволяет концентрировать исследования на главном, оценивать связи, разграничивать их на внешние и внутренние, понимать свойство, как проявление целого в одном случае и как проявление отдельного - в другом.

Принцип последовательности требует проведения исследования по определенной, заранее разработанной технологии. В использовании этого принципа большое значение имеет ответ на вопрос: с чего начать и как двигаться к результату?

Принцип целеустремленности означает, что любое исследование должно иметь вполне определенную цель. Исследование - это не только разрешение возникшей проблемы, но и определение, к какой цели может вести это разрешение, в какой мере оно способствует достижению цели. Цель определяет выбор решений и последовательность их разработки, цель интегрирует деятельность в самых сложных ее вариантах: многоаспектность, совместное исследование, разветвленность исследования, сложность проблемы и т. д.

Принцип свободы мышления определяет необходимость снятия ограничений в полете мысли, фантазии, воображения, идей.
Принцип управления мышлением предполагает, что мышление, как и всякий процесс, должно быть не спорадическим. Он ведет к эффективности исследования. Это может быть управление процессом индивидуального мышления или процессом групповой мыслительной деятельности.
Как и всякая деятельность, исследование строится на использование определенных ресурсов, величина и структура которых в значительной мере определяют его эффективность. Ресурсы нельзя использовать бездумно, но и стремясь получить необходимый результат, нельзя бездумно лграничивать исследования в необходимых ресурсах, отсюда возникает важный принцип гибкой экономии ресурсов. В некоторых исследованиях заранее очень трудно предусмотреть и рассчитать достаточно точно, сколько рессурсов понадобится для достижения необходимого результата. Поэтому расчет ресурсов надо делать с запасом, понимая, что и результат исследования не всегда достаточно предсказуем, иногда он может быть значительнее ожидаемого. Тогда и при перерасходовании ресурсов эффективность исследования будет все равно высокой.

Принцип качественной и количественной определенности исследования заключается в том, что, по возможности, исследования надо проводить, опираясь на количественные измерители параметров, показатели, но при этом не терять качество изучаемых явлений, т. е. совокупность тех свойств, которые определяют их суть и особенности.

Принцип фактологического обеспечения исследования заключается в том, что исследование необходимо строить на фактах и отбирать факты соответствующим образом. В этом основа и объективности исследования, и его успешности, а в конечном итоге и эффективности.

Принцип реализации креативного образования менеджера предполагает его оформление с помощью образовательных процессов, которое закрепляется и проявляется в практической деятельности и развивается в процессах исследования.

Принцип опоры на исследовательское мышление менеджера предполагает его развитие в практике управления и в проведении исследования. Исследование преследует цель не только найти удачное решение проблемы, но и научить менеджера мыслить эффективно, исследовательски, инновационно.

И еще один принцип следует добавить к этому перечню - принцип трудоемкости. Суть его заключается в том, что всякое исследование должно быть рассчитано по трудоемкости его проведения. От этого зависит и его организация, и рациональное использование всех ресурсов, а, следовательно, и эффективность.

При оценке эффективности исследования критерий эффективности определяют как количественное отражение степени достижения системой поставленных перед ней целей.

1) неэффективные, не позволяющие решить проблему;

2) рациональные, т. е. позволяющие решить проблему;

3) оптимальный вариант решения - вариант, позволяющий решить проблему исследования наилучшим в определенном критерием смысле образом построить наилучшую систему исследований в определенномкритерием смысле. Если неэффективных и рациональных решений может быть много, то оптимальное решение одно.

При исследовании сложной системы управления в силу ее многогранности критерий, как правило, является вектором. При этом задача оптимизации сложной системы является многокритериальной.

Критерий включает в себя в качестве компонентов параметры эффективности (эффекта).

16.3. Параметры эффективности исследования.

Параметр эффективности исследования - относительные значения наиболее важных параметров системы и(или) исследований, а также отношения таких параметров, которые позволяют оценить качество решения проблемы и достижение, поставленных перед системой целей. Например, параметром эффективности будет оценка соотношения одного и того же параметра (пусть это будет расход топлива) до и после внедрения результатов исследования. Они отражают степень прогресса в результате исследования и (или) эффективность расхода ресурсов, в частности денежных средств , в процессе исследований. Они позволяют выбирать предпочтительные варианты изменений в объекте или самого процесса исследования.

В качестве параметров эффекта исследования будем называть абсолютные значения изменений важнейших параметров, например, объем сэкономленного топлива в литрах, тоннах, рублях и т п.

При формировании параметров эффективности (или эффекта) при исследовании систем управления организационно-производственной системы наиболее часто используют; стоимость и (или) время создания; доход, прибыль (убытки) за фиксированный период и т. д.

При выборе состава параметров эффекта учитывают как то, ради чего создается система, так и цели исследования. Часто из двух исследовательских процессов, относящихся к одним и тем же объектам, и решающих одну и ту же задачу при равных ресурсах, более эффективным считают тот, который при прочих равных условиях приводит к достижению цели за более короткий интервал времени.

16.4. Роль оценивания в исследовании систем управления.

Одной из сложных и важных проблем исследования управления является оценка ситуаций, состояния, изменений, тенденций и пр.

Оценка - это установление наличия и степени проявления той или иной характеристики системы управления. Средством оценки является показатель. На оценках построены анализ, нормативное регулирование функционирования и развития, поиск и определение тенденций, изучение особенностей и существенных черт того или иного явления. Без оценок невозможны разработка и принятие управленческих решений, в том числе и решений по совершенствованию управления. Чем более точную оценку может провести менеджер или исследователь, тем больше вероятность успешного, рационального решения.

Оценки могут быть различными. Можно выделить оценки программно-тестовые и экспертные. Первые очень широко используются в настоящее время, когда существует компьютерная техника , открывающая в этом отношении очень большие возможности. Но многие характеристики можно оценить только на основе работы группы экспертов. Очень эффективно сочетание первого и второго.

Оценки также разделяются на коллективные и индивидуальные. В практике исследований используются как точные, так и приблизительные оценки. По процессным признакам существуют оценки эпизодические и периодические; по масштабам оцениваемых явлений выделяются оценки общие и локальные; по организации и методикам проведения существуют простые и сложные оценки. Последние всегда построены на специальных расчетах, агрегировании информации, построении синтетических показателей.

Выбор вида оценки имеет большое значение в достижении успеха исследования.

Для оценки необходимо:

· выделение объекта и предмета оценки;

· установление критериев оценки и шкалы измерения;

· построение процедуры и системы оценки;

· выбор средств и методов оценки;

· использование результатов оценки.

16.5. Принципы оценивания исследования систем управления.

Существуют определенные принципы оценивания, благодаря которым возможны адекватная оценка реальной действительности, глубокое понимание ситуаций, проблем, результатов или тенденций.

1. Принцип научности. В основе оценки всегда находятся методики ее проведения или осуществления. А они могут быть разными: можно оценивать на основе здравого смысла, богатого опыта, но можно строить оценку и на использования научных методов, математического моделирования, там, где это возможно. В этом случае и оценивать должен тот, кто знает предмет оценки, владеет ее методикой, способен подойти к ней с объективных позиций.

2. Важным дополнением этого принципа является также принцип целевого назначения. Оценка может проводиться вообще или быть ориентирована на некоторые предположительные результаты, но может иметь и ясную, конкретную цель. Можно оценивать, скажем, в целях стимулирования деятельности, группирования работников, нормирования работы, распределения финансовых средств и т. д. Целью оценки может быть и поиск путей развития, установление закономерностей, контроль тенденций.

3. Принцип разнообразия, полноты и системности. Очень часто подлежат оценке только те характеристики, которые известны, доступны, понятны, измеряемы. В результате такого подхода получается деформированная оценка, которая не дает полной картины события или ситуации, явления или проблемы. При проведении оценки очень важно учитывать связь характеристик, стремиться к их полноте, видеть разнообразие и достаточность.

4. Принцип критериальной определенности. Можно оценивать грубо, приблизительно, предварительно, но не бывает оценки без критерия. Критерий оценки - это точка отсчета, шкала измерений, это констатация специфики характеристики, подлежащей оцениванию. Чем точнее установлен критерий, тем объективнее и значительнее оценка. При проведении оценки недопустимо произвольное изменение критерия.

5. Принцип количественной определенности оценки. Оценивать можно в параметрах констатации качества, описания особенностей, но оценка может проводиться в количественных показателях, которые дают точную информацию и позволяют эффективнее оперировать оценками: сравнивать, синтезировать, улавливать изменения. В исследованиях систем управления необходимо, по возможности, стремиться к количественным оценкам. Но при этом нельзя отрицать, что в определенных обстоятельствах эвристические оценки могут быть богаче и полезнее. Количественные измерения нередко обедняют ситуацию.

6. Принцип сочетания оценки состояния и изменений. Чаще всего оценка является фиксацией состояния той или иной характеристики, фотографией остановившегося мгновения, констатацией степени проявления характеристики. Но в исследовании наиболее богатой информацией обладают оценки динамики, способные показать тенденции изменений, позволяющие предвидеть последствия. В конечном итоге необходимо сочетание того и другого.

7. Но оценка - это не просто установление и измерение тех или иных характеристик, это, помимо прочего, и деятельность исследователя или группы исследователей, работа экспертов, математиков, программистов. И это обстоятельство не может не быть отражено в принципах оценки.

8. Принцип независимости заключается в том, что оценка должна быть отделена, насколько это возможно, от личностных отношений, служебной зависимости, амбиций и самолюбия. Она должна быть защищена от влияния заинтересованных лиц, доброжелателей или недоброжелателей.
Это достигается как посредством методики оценки, так и соответствующей организацией ее проведения.

16.6. Виды оценки параметров управления.

Оценки могут быть различными. В каждом конкретном случае исследователю приходится выбирать тот вид, который может быть наиболее приемлемым и эффективном. Этот выбор определяется как характером исследуемых проблем, так и возможностями оценивания. Специфика оценивания проблем управления заключается в том, что все они в конечном итоге связаны с деятельностью человека и его человеческими качествами. Многие параметры управления невозможно измерить достаточно точно, а некоторые даже вообще выделить и каким-либо образом отграничить. Поэтому многие оценки необходимо строить на статистическом анализе, либо использовать социометрические методы тесты и экспертные оценки.

1. По области и масштабам оценивания тех или иных ситуаций можно выделить оценки общие и локальные. Так проявляются и проблемы управления. Одни из них имеют общий характер, другие ограничены какой-либо областью деятельности. Методология исследования должна предусматривать различие этих видов.

2. Оценки могут быть простыми и сложными, в зависимости от того, предполагают ли они множество расчетов или построены на измерении первичной информации. В сложных оценках нередко случается нарушение валидности показателей, смещение акцентов актуальности и важности, потеря информации. Необходимо избегать таких случаев при конструировании показателей.

3. В оценках большую роль играет момент и продолжительность их проведения. По этому критерию можно выделить оценки эпизодические и периодические. Первые вызываются необходимостью конкретной ситуации, возникновением и обострением новых проблем, вторые систематическим исследованием управления, мониторингом качества.

4. Всякая оценка отражает потребность поиска и решения проблем и требует затрат определенных ресурсов. Поэтому можно дифференцировать оценки по критерию точности измерения параметров. Существуют оценки точные и приблизительные (грубые, предварительные, ориентировочные, порядковые). Вторая группа способствует экономии ресурсов при. поиске ведущих проблем. Но глубокий анализ и ответственные исследования необходимо строить на предельно строгих и точных оценках.

5. По организации оценивания можно выделить оценки коллективные и индивидуальные. Часто используется их сравнительный анализ. При этом необходимо учитывать параметры и коллектива, и личности - опыт, образование, квалификация, мотивы, социальность и пр.

6. Методика проведения оценки имеет ключевое значение в ее корректности. В исследовании управления часто используются два вида оценки - тестовая и экспертная. Не исключаются и их различные комбинации. Тестовая оценка может быть очень эффективной, но зависит от качества тестов, а успех экспертной оценки в значительной мере определяется принципами формирования экспертных групп и организации их работы.

7. По получению информации и методике ее обработки можно выделить также статистическую и нестатистическую оценку. Искусство исследования, помимо всего прочего проявляется и в выборе вида оценок в конкретных обстоятельствах.