-АНАЛИЗ РЕЗУЛЬТАТОВ ГНТЭ И БАЛЛОВ ННС ПО ПРИОРИТЕТУ ИНТЕЛЛЕКТУАЛЬНЫЙ ПОТЕНЦИАЛ СТРАНЫ” ПО НАПРАВЛЕНИЮ НАУКИ “СОЦИАЛЬНЫЕ, ГУМАНИТАРНЫЕ НАУКИ И ИСКУССТВО”
Конкурсы на грантовое финансирование для молодых ученых и «Жас ғалым» – постодокторантура (2024-26)
Молдашев Кайрат
ВВЕДЕНИЕ
Экспертная оценка и транспарентность являются основой справедливого и эффективного распределения средств выделяемых в рамках финансирования науки. Особенно важно поддержка молодых ученых для привлечения и удержания научных кадров.
В Казахстане в рамках оценка заявок на грантовое финансирование проводится в два основных этапа. Первый этап Государственная научно-техническая экспертиза, при которой каждую заявку оценивают два зарубежных и один отечественный эксперт. При ГНТЭ максимально возможный балл – 38. Все заявки, которые набрали 25 и более баллов далее отправляются в Национальные научные советы (ННС). Встречи ННС проводятся с онлайн трансляцией, где после выступления одного или двух членов ННС, которые просматривают заявки, все члены ставят баллы в системе. Максимально возможный балл при оценке со стороны ННС – 15. Далее идет суммирование баллов ГНТЭ и ННС. Составляется ранжированный список в порядке убывания на основе общих баллов. Сумма финансирования, выделенная на каждый приоритет, распределяется по проектам, начиная с проекта с наибольшим баллом и далее по списку.
Данный конкурентный подход к распределению финансирования широко распространена по всему миру. Конечно, могут быть проблемы с субъективной оценкой или непрофессионализмом со стороны некоторых экспертов или же членов ННС. Но в целом за счет привлечения трех экспертов и за счет снижения удельного веса ННС, который имеет меньше времени и ресурсов на проверку заявок чем эксперты, поддерживается достаточно высокий объективности оценки.
Сейчас, я готовлю работу по трендам в оценке заявок при ГНТЭ и со стороны ННС по всем приоритетам. А пока предоставляю вашему вниманию быстрый анализ основных показателей после оценки заявок по двум конкурсам: грантовое финансирование для молодых ученых и «Жас ғалым» – постодокторантура по приоритету «Интеллектуальный потенциал страны» по направлению науки “Социальные, гуманитарные науки и искусство”.
МЕТОДОЛОГИЯ
Данные для анализа доступны на сайте НЦГНТЭ в выписках по каждому конкурсу. Файлы выписок были конвертированы в Excel с использованием платной версии Adobe Acrobat, проверены и подготовлены для анализа в Excel. Для анализа использовалась программа Gretl. Gretl является очень удобной и бесплатной программой для статистического анализа. Работает быстрее чем ChatGPT.
Приводятся общие статистические показатели, корреляционный анализ и диаграмма рассеяния для каждого конкурса. Корреляционный анализ между баллами ГНТЭ и ННС важен для оценки объективности ННС. При ГНТЭ каждую заявку оценивают три эксперта, которые работают в сфере науки, по которой подана заявка, и дают детальные комментарии. А в ННС один эксперт (в некоторых случаях не имеющий отношения к теме заявки) может оценивать несколько или несколько десятков заявок за короткий срок. Так как нет принципиального отличия в рубриках для оценки, то отсутствие или низкий уровень корреляции вызывает вопросы.
РЕЗУЛЬТАТЫ
Конкурс на грантовое финансирование для молодых ученых (2024-26)
Таблица 1. Общие показатели – конкурс молодых ученых
| ГНТЭ | ННС |
|
Заявок – 39 Среднее значение 29.193 Медиана 28.660 Минимум 25.000 Максимум 34.660 Стандартное отклонение 2,7017 |
Заявок – 39 Среднее значение 9.4654 Медиана 9.2900 Минимум 5.5900 Максимум 12.670 Стандартное отклонение 1,9226 |
Корреляционный анализ между баллами ГНТЭ и ННС показывает, что корреляция статистически значима (p-value 0.0193). Уровень корреляции средний и равен 0.37.
На рисунке 1 приведена диаграмма рассеяния. ExpertReview означает баллы ГНТЭ, а CouncilReview – баллы ННС.
Рисунок 1. Диаграмма рассеяния – конкурс молодых ученых
Конкурс на грантовое финансирование «Жас ғалым» – постодокторантура (2024-26)
Таблица 2. Общие показатели – Жас ғалым
|
ГНТЭ |
ННС |
|
Заявок – 125 Среднее значение 28.725 Медиана 28.660 Минимум 25.000 Максимум 36.330 Стандартное отклонение 2,4485 |
Заявок – 125 Среднее значение 8.7479 Медиана 9.1900 Минимум 1.0000 Максимум 12.320 Стандартное отклонение 1,9700 |
Корреляционный анализ между баллами ГНТЭ и ННС показывает, что корреляция статистически значима (p-value 0.0000). Уровень корреляции средний и равен 0.36.
На рисунке 2 приведена диаграмма рассеяния. ExpertReview означает баллы ГНТЭ, а CouncilReview – баллы ННС.
Рисунок 2. Диаграмма рассеяния – Жас ғалым
ЗАКЛЮЧЕНИЕ
Анализ показывает, что между баллами ГНТЭ и ННС в двух конкурсах наблюдается статистически значимая корреляция со средним уровнем корреляции в конкурсе для молодых ученых – 0.37 и в конкурсе «Жас ғалым»- постдокторантура – 0.36. Имеются заявки оутлаеры, которые получили низкий балл ГНТЭ, но при этом получили высокую оценку ННС и наоборот.
По видеозаписям заседания ННС заметна хорошая работа некоторых членов ННС, которые кратко и аргументированно дают рекомендации на основе оценки. Но также имеются случаи, когда идут излишние комментарий не на основе рубрики для оценки, а на основе личного мировоззрения члена ННС или же рекомендаций не четко аргументированы. Учитывая, что заседания проводятся открыто и по комментариям членов ННС формируется мнение об объективности данного уровня оценки, членам ННС рекомендуется следовать строго рубрикам оценки и кратко обосновывать рекомендации другим членам совета.