Корпус экспертов: Краткая информация об итогах проекта за 2007–2008 г.г.
и проблемах его дальнейшего развития.
Опубликовано 30 декабря 2008 г.

В опубликованном списке экспертов по физике и астрономии по состоянию на 23.12 введено условное разделение по разделам (специализациям). Группы кодов классификатора, отвечающие этим разделам, указаны в нашем предыдущем комментарии. Поскольку коды классификатора PACS не всегда точно и однозначно определяют специализацию, в 2009 г. планируется уточнять и детализировать распределение, используя большой массив ключевых слов — они собраны в ходе опроса и [возможно] позволят составить реальный классификатор.

Уже сейчас очевидно, что использовавшаяся в 2007–2008 г. методика опроса и определения порогов заведомо не срабатывает (или требует модификации) для некоторых разделов науки. Рабочая группа предполагает, что предложения по возможной модификации нужно обсуждать с участием уже избранных экспертов после подготовки подробного материала о распределении по ключевым словам.

Таблица отражает структуру избранного экспертного пула, составленного по итогам двух завершенных процедур — первичного опроса цитируемых специалистов и вторичного опроса с фиксированным порогом. Как неоднократно отмечалось в хронике проекта, наиболее проблемной областью является экспериментальная физика высоких энергий — это усугубляется, кроме прочего, ограничением проекта who-is-who на включение авторов многолюдных экспериментальных коллабораций в список цитируемых. Даже с учетом голосов дополнительного списка экспериментаторов hep обеспечить сопоставимую с теоретиками hep представительность экспериментаторов не удалось. Об аналогичной проблеме сообщили специалисты по астрономии — в этой области избранные эксперты оказались преимущественно астрофизиками.

Распределение названных в опросе 5 и более раз
(без учета 7 иностранных ученых)

  Всего
(в том числе дали согласие до 23.12)*
Из исходных списков* Диаспора
[в том числе по факту]*#
Работающие в России, отсутствующие в исходных списках
cond-mat
optics
151 (112)
Отказов — 5
100 31 [48] 20
astro 43 (28)
Отказов — 2
39 3 [12] 1
atom phys 11 (10) 11
hep-nucl mathphys 97 (43)
Отказов — 2
Отложили решение — 3
80, в том числе
9 из доп. списка
8 [23] 3
иное 2 2
  286 (191) 213 42 [79] 24

* — с учетом двойных специализаций — поэтому сумма может быть больше общего количества
# — в исходных списках есть постоянно работающие за рубежом — в скобках цифры, отвечающие реальному месту проживания,
независимо от указаний российского места работы в статьях

Следует отметить существенно различное восприятие вопросов анкеты представителями разных специальностей. Предлагалось следующее:

«... назвать экспертов, способных квалифицированно оценивать проекты в Вашей и смежных областях науки и пользующихся научным авторитетом среди коллег...»,
и по опыту опроса cond-mat предполагалось, что это поможет вовлечь в опрос малочисленные и низкоцитируемые сообщества. Однако представители hep-nucl и astro в основном называли коллег в рамках более узкой специализации.

Мы полагаем, что дальнейшие шаги по дополнению списков и ликвидации перекосов могут быть предприняты только в том случае, если удастся их строго регламентировать в рамках прозрачной методики. Предложения по кооптации дополнительных экспертов противоречат основному замыслу проекта, в рамках которого допустимы, например, следующие процедуры:

  • определение «уточненных специальностей» в терминах сбалансированного многоуровневого классификатора, составленного по итогам анализа ключевых слов;
  • проведение вторичного опроса среди уже включенных в базу коллег некоторых «уточненных специальностей»;
  • проведение вторичного опроса в рамках крупных разделов (если избранные эксперты соответствующего профиля смогут предложить для этого твердое обоснование);
  • обоснованное изменение порогов для малочисленных и низкоцитируемых «уточненных специальностей».

Рабочая группа уверена, что публикация списков актуальна уже сейчас, несмотря на недостаточную представительность или отсутствие некоторых специализаций. Это дает шанс улучшить хотя бы частично экспертную ситуацию в разворачивающихся бюджетных программах, частных фондах и компаниях.

Мы признательны всем откликнувшимся на письма и приносим извинения за технические ошибки, допущенные в некоторых рассылках. Надеемся, что их количество по мере совершенствования технических средств проекта удаётся уменьшать.

Благодарим Владиславу Сабрауи, Юлию Вахтееву и Александра Прокофьева за техническое и организационное обеспечение проекта и
Фонд Дмитрия Зимина «Династия» за поддержку проекта.

Поздравляем всех с наступающим 2009 годом,
объявляем каникулы до 15 января.

Рабочая группа проекта:
Виталий Арнольд, Михаил Фейгельман,
Галина Цирлина, Борис Штерн