Архив метки ЭКСПЕРТИЗА

Автор:Георгий Николаенко

Экспертиза vs экспертная оценка: понятийные основания компетенций

Оболкина Светлана Викторовна

Институт философии и права УрО РАН, Екатеринбург, Россия

Попова Наталья Геннадьевна

Институт философии и права УрО РАН, Екатеринбург, Россия

Ключевые слова:

ЭКСПЕРТИЗА, ЭКСПЕРТНАЯ ОЦЕНКА, СОЦИАЛЬНЫЙ ИНСТИТУТ ЭКСПЕРТИЗЫ, НАУКА, ЛИМИНАЛЬНОСТЬ, НОРМА, ЭКСПЕРТНЫЕ СИСТЕМЫ, ИНЖЕНЕРИЯ ЗНАНИЙ, EXPERTISE, EXPERT EVALUATION, SOCIAL INSTITUTION OF EXPERT EVALUATION, SCIENCE, LIMINALITY, NORM, EXPERT SYSTEMS, KNOWLEDGE ENGINEERING

Аннотация:

Работа посвящена социальному институту экспертизы и понятийной проработке его основных концептов: «экспертиза» и «экспертная оценка». Целью статьи выступает дифференциация тех когнитивных потребностей и задач, которые присутствуют в практике экспертизы. Выявлены два противоположных по своим потребностям, но дополняющих друг друга вектора этой практики: (1) ориентация на формализацию и методологическую прозрачность; (2) стремление сохранить интуитивную составляющую компетенции эксперта. С учетом этого контекста проанализированы методологические интенции, которые реализуются в разработках автоматизированных систем экспертизы: экспертных систем и оболочек экспертных систем. Показаны как сильные стороны автоматизированной экспертизы, так и принципиальные проблемы и ограничения, с которыми сталкивается инженерия знаний. Обосновано, что (1) способность человеческого знания реагировать на атипическое связана с когнитивной процедурой оценивания; (2) необходимый элемент экспертизы, связанный с интуитивным знанием, реализуется в качестве экспертной оценки. Раскрыт потенциал оценки в качестве экспертного знания, для чего предпринят анализ специфики функционирования нормы в аксиологическом отношении. Исследование сущности экспертной оценки развивается в контексте проблематики маргинальности и лиминальности. Показано, что активность лиминальных интенций предполагает определенный риск для существования нормы, но в то же время способствуют ее обновлению. Делается вывод о том, что будет неверным исключить из экспертной деятельности процедуру оценивания — в первую очередь в отношении научного знания. Выявленная специфика экспертизы и экспертной оценки являются различными и дополнительными компетенциями и должны выступать основанием выбора той или иной стратегии экспертного исследования.

Expertise vs Expert Evaluation: Conceptual Basis of Competencies

Obolkina Svetlana V.

Ural Branch of the Russian Academy of Sciences, Ekaterinburg, Russia

Popova Natalia G.

Ural Branch of the Russian Academy of Sciences, Ekaterinburg, Russia

This work is devoted to the social institution of scientific expertise and its basic concepts — “expertise” and “expert evaluation”. Our aim was to differentiate the cognitive needs and tasks involved in the practice of scientific evaluation. Two vectors of this practice, being opposite in their needs but complementing each other, were identified: (1) orientation towards formalization and methodological transparency; (2) the desire to preserve the intuitive component of the expert’s competence. In this respect, we analysed methodological intentions realised in automated evaluation systems, both inexpert systems and expert system shells. Strengths of automated scientific output evaluation were shown, along with its weaknesses that reveal the fundamental problems and limitations faced by knowledge engineering. It is shown that (1) the ability of human knowledge to respond to non-trivial tasks is associated with a cognitive evaluation procedure; (2) expert evaluation is realised as a necessary expertise element related to intuitive knowledge. The potential of expert evaluation was revealed by analysing the specifics of the norm in its axiological sense. The essence of expert evaluation was investigated in the context of the marginality and liminality concepts. It is shown that the activity of liminal intentions involves a certain risk for the existence of the norm, at the same time as contributing to its renewal. It is concluded that it would be wrong to exclude the evaluation procedure from expert activity, primarily in relation to scientific knowledge. Expertise and expert evaluation are different but complementary competencies that should serve as the basis for selecting an expert evaluation strategy.

Скачать PDF-файл | Download PDF

Автор:Георгий Николаенко

Оценка эффективности экспертных групп при проведении экспертизы научно-квалификационных работ.

Подробнее / More

Оценка эффективности экспертных групп при проведении экспертизы научно-квалификационных работ.

Ольга Николаевна Коростелева

Санкт-Петербургский государственный экономический университет

КЛЮЧЕВЫЕ СЛОВА:

ЭКСПЕРТИЗА, ДИССЕРТАЦИОННЫЙ СОВЕТ, НАУЧНО-КВАЛИФИКАЦИОННАЯ РАБОТА, АКТИВНЫЕ ЧЛЕНЫ СОВЕТА, СТРУКТУРА ПОСТОЯННЫХ ЧЛЕНОВ СОВЕТА, ФУНКЦИЯ СТРУКТУРНЫХ ПОТЕРЬ,ЭКСПЕРТНАЯ ЭФФЕКТИВНОСТЬ, EXAMINATION, DISSERTATION COUNCIL, SCIENTIFIC AND QUALIFICATION WORK, ACTIVE MEMBERS OF COUNCIL, STRUCTURE OF PERMANENT MEMBERS OF COUNCIL, FUNCTION OF STRUCTURAL LOSSES, EXPERT EFFICIENCY

АННОТАЦИЯ:

В статье исследуется вопрос об оценке качества работы диссертационных советов. Для получения количественной оценки эффективности экспертизы научно-квалификационной работы (диссертации) диссертационным советом был выполнен анализ процедуры защиты диссертации. Показано, что объективная оценка защищаемой диссертации может быть получена с помощью привлечения трех типов экспертов. Установлено, что эффективность всего процесса экспертизы зависит от того как проходит экспертиза у каждой выделенной группы экспертов, а также от структуры, определяемой различием величин вклада экспертных групп в основной процесс. Предложены оценки эффективности процесса экспертизы, учитывающие структуру привлеченных экспертов. Предложена методика оценки потенциальной возможности диссертационного совета по проведению экспертизы научно-квалификационных работ, в основу которой положены идеи учета структуры постоянных членов диссертационного совета. Используя методы дискриминантного анализа, разработана методика выделения активных экспертов из постоянных членов диссертационного совета, которые проявляют интерес к большинству защищаемых работ и принимают активное участие в обсуждении диссертаций. Полученная методика была применена к данным ряда диссертационных советов одного из университетов. Выявленный качественный состав диссертационных советов показал, что в некоторых из них количество активных членов является недостаточным для эффективной экспертизы. Получены оценки потенциальных возможностей диссертационных советов, из которых следует, что одна и та же экспертная эффективность диссертационного совета может быть достигнута при участии ограниченного числа экспертов. Количественные оценки потенциальной эффективности существующих диссертационных советов, указывают на возможность сокращения числа постоянных членов диссертационных советов и замены их жюри без снижения общей эффективности оценивания диссертационных работ. Установлено необходимое число членов жюри, обеспечивающее такую же эффективность проведения процесса экспертизы научно-квалификационной работы, как и классический диссертационный совет.

ОПИСАНИЕ НА АНГЛИЙСКОМ ЯЗЫКЕ:

The Assessment of Efficiency of Expert Groups at Conducting Examination of Scientific and Qualification Works

Korosteleva Olga N.

St Petersburg State Economic University

The question of the assessment of dissertation councils’ quality performance is investigated in the article. The analysis of the thesis defense procedure was conducted to receive a quantitative estimation of the thesis examination efficiency of dissertation councils. It is shown that the objective estimation of a defended dissertation can be received by recruitment of the experts of three types. The efficiency of all examination process depends on how the examination is conducted by each allocated group of experts, and on the structure determined by the difference of an expert groups’ contribution to the main process. The estimates of examination process efficiency are offered to consider the structure of involved experts. The method of assessment of a dissertation council was based on consideration of structure of its permanent members. Methods of the discriminant analysis allowed to develop the technique to allocate active experts interested in the majority of dissertaion and actively participating in discussion of theses. The obtained technique has been used to a data of a number of dissertation councils of one of the universities. The revealed qualitative structure of dissertation councils has shown that in some of them the number of active members is insufficient for effective examination. The estimates of dissertation councils’ potentialities are the following. The same expert efficiency of a dissertation council can be reached with the assistance of limited number of experts. Quantitative estimates of potential efficiency of the existing dissertation councils highlight a possibility to reduce a number of permanent members and to replace them with the jury. The necessary number of judges providing the same efficiency of conducting a process of thesis examination as classical dissertation council is determined.

elibrary_29905409_18271005

СКАЧАТЬ/DOWNLOAD

Автор:Центр социолого-науковедческих исследований

Грантовая система финансирования российской науки: итоги одного социологического опроса

Подробнее / More

Грантовая система финансирования российской науки: итоги одного социологического опроса

Лазар Михай Гаврилович

РГГМУ

Стрельцова Екатерина Александровна

Институт статистических исследований и экономики знаний НИУ ВШЭ

КЛЮЧЕВЫЕ СЛОВА: ГРАНТ, GRANT, ГРАНТОВАЯ СИСТЕМА, GRANT SYSTEM, ЭКСПЕРТИЗА, EXPERTISE, РФФИ, RFBR, РГНФ, RHF, РНФ, RSF, ОСОБЕННОСТИ РОССИЙСКИХ ФОНДОВ, ESPECIALLY RUSSIAN FUNDS, АНКЕТИРОВАНИЕ, МОТИВАЦИЯ ГРАНТОВОЙ АКТИВНОСТИ, QUESTIONING THE MOTIVATION OF THE GRANT ACTIVITY

АННОТАЦИЯ:
Раскрываются особенности грантовой системы финансирования науки России, структура и функционирование государственных грантовых фондов — РФФИ, РГНФ, РНФ. На базе проведенного в апреле 2014 года интернет-анкетирования ученых исследована роль грантов в жизни и карьере российских ученых, отношение ученых к грантам, мотивация к участию в грантовых конкурсах. Сформулирован ряд предложений по усовершенствованию системы научных фондов.

ОПИСАНИЕ НА АНГЛИЙСКОМ ЯЗЫКЕ:

Grant Funding System of Russian Science: the Results of a Public Opinion Poll

Lazar Mihal G,

Russian State Hydrometeorological University

Streltzova Ekaterina A.

Institute for Statistical Studies and Economics of Knowledge

The article describes the features of a grant of funding for science in Russia, the structure and functioning of the state grant funds — RFBR, RHF, RNF. On the basis of E. A. Streltsovoy held in April 2014 Internet survey of scientists, investigated the role of grants in the life and career of Russian scientists, their relation to grants, the motivation for their participation in grant competitions. A number of proposals to improve the system of grant funds for science.

СКАЧАТЬ/DOWNLOAD

СКАЧАТЬ/DOWNLOAD