Карданова Елена Юрьевна

Researchers discovered that language proficiency tests could be significantly shortened by processing responses more effectively. An international team of scholars, including a researcher from the Institute of Education, demonstrated this using data from around 3,000 students who took English listening tests.

Языковой тест можно сократить почти вдвое без потери точности, если правильно обрабатывать ответы. Международная команда исследователей доказала это на данных трех тысяч студентов, которые сдавали тест по аудированию на английском языке.

Moses Oluoke Omopekunola, from Nigeria, is a second-year student of the Science of Learning and Assessment (SOLA) programme. Intent on pursuing a career in psychometrics, he has already joined the PhD programme in Education to deepen his knowledge of the theory and methodology of learning. In this interview with the HSE News Service, Moses explains how his master’s programme aligns with his future plans, recalls the challenges he has faced, and shares the most valuable lessons he has learned so far.

Нейросети уже умеют писать тексты, переводить языки и распознавать изображения. Но смогут ли они решать более узкие задачи, например, создавать школьные задания по физике? Исследователи Мозес Омопекунола и Елена Карданова решили это проверить. Результаты их работы опубликованы в Research and Evaluation in Education.

In the rapidly evolving landscape of artificial intelligence, understanding the capabilities and limitations of large language models (LLMs) in specialized fields such as education is crucial. A study by Elena Kardanova, Alina Ivanova, Ksenia Tarasova, Taras Pashchenko, Aleksei Tikhoniuk, Elen Yusupova, Anatoly Kasprzhak, Yaroslav Kuzminov, Ekaterina Kruchinskaia, and Irina Brun, introduces a novel psychometrics-based methodology to assess LLM performance in the field of pedagogy. By focusing on the educational domain and developing a robust benchmark tailored for LLM evaluation, the authors offer new insights into the strengths and weaknesses of these models.

Первоклашкам помогает освоиться в школе не только умение читать и считать, сколько способность различать звуки речи и дружить со сверстниками. На открытом семинаре эксперты из Центра психометрики и измерений в образовании рассказали, какие условия и умения помогают школьникам успешно начать учебу.

Российские вузы получили новый инструмент для оценивания экономической грамотности студентов. Система тестирования, разработанная ведущими преподавателями Факультета экономических наук ВШЭ совместно с экспертами Центра психометрики и измерений в образовании, не только проверяет знания, но и помогает научиться принимать верные экономические экономические решения в реальной жизни.

Researchers at HSE University have proposed a novel approach to assessing AI's competency in educational settings. The approach is grounded in psychometric principles and has been empirically tested using the GPT-4 model. This marks the first step in evaluating the true readiness of generative models to serve as assistants for teachers or students. The results have been published in arXiv.

Кто работал с искусственным интеллектом, уже оценил его пользу и удобство. ИИ быстро обрабатывает информацию и генерирует текст, что делает его потенциальными помощниками в образовательной среде. Но можно ли ему доверять? Эксперты ВШЭ разработали первую научную методику для проверки компетентности ИИ в роли образовательного ассистента.

Исследователи из НИУ ВШЭ предложили новый научный подход для оценки компетентности искусственного интеллекта в области образования. Подход основан на психометрических принципах и проиллюстрирован на примере проверки GPT-4. Это первый шаг к проверке реальной готовности генеративной модели к роли ассистента педагога или ученика. Результаты работы опубликованы в arXiv.

Пока ученые спорят о пользе и вреде искусственного интеллекта, молодежь активно осваивает и интегрирует нейросети в свою жизнь, приспосабливая нашу реальность к новым условиям. О том, как дообучить LLM, чтобы они смогли служить полноценными ассистентами в профессиональной среде, обсудили в Вышке на воркшопе «Большие языковые модели в науке и в жизни».

Осенью 2023 года ведущие эксперты Научного центра мирового уровня «Центр междисциплинарных исследования человеческого потенциала» уже во второй раз провели серию образовательных мастер-классов по человеческому потенциалу. В этот раз они были адресованы студентам старших курсов бакалавриата и магистратуры Уфимского университета науки и технологии (УУНиТ). Партнером образовательного цикла выступила Научная лаборатория социальных и демографический исследований УУНиТ.

Без точных измерений не бывает науки, а психометрика создает инструменты и методы анализа данных в психологии и образовании. Новый выпуск журнала «Вопросы образования», под редакцией Елены Кардановой и Алины Ивановой, полностью посвящен тому, как эти инструменты и методы помогают совершенствовать учебный процесс.

Педагогам важно знать, как улучшить образование с самого начала — например, в каком возрасте детям лучше идти в школу, когда учить их читать и знакомить с арифметикой. К тому же, необходимо оценить качество обучения детей, и здесь наука все еще совершенствует свои методы.

С 18 октября по 17 декабря 2022 года состоялась серия мастер-классов, посвящённая итогам исследований НЦМУ “Центра междисциплинарных исследований человеческого потенциала” о концептуальных основах оценки и измерения человеческого потенциала. В рамках семинаров прошли как теоретические занятия, посвященные экономическим и социологическим подходам к изучению человеческого капитала, так и практические мастер-классы по технике его измерения. Мероприятия были направлены на популяризацию результатов исследований НЦМУ ЦМИЧП и вовлечение обучающихся и молодых ученых в работу по данной проблематике.

Что оценивают в школе в первую очередь? Предметные знания (они же hard skills) — то, что ученик освоил по каждой конкретной дисциплине. Учителя каждый день ставят отметки за работу в классе и домашние задания, а изредка (но зато более объективно) проходят так называемые экзамены с высокими ставками — ЕГЭ, ОГЭ, ВПР... В Инобре предложили третий путь и создали инструмент мониторинга предметных знаний, с помощью которого прогресс ученика можно отслеживать на протяжении всей основной школы и в старших классах. Инструмент уже опробован на практике, а его качество подтвердила независимая экспертиза.

В стандарты подготовки студентов всех направлений входят так называемые универсальные компетенции. К ним относятся критическое мышление, коммуникация, проектная работа, экономическая грамотность... Соответственно, вузы должны не только формировать, но и оценивать эти компетенции. Но здесь подвижек нет: ни экзаменов по критическому мышлению, ни зачетов по коммуникации не появилось. Что может предложить современная наука? Это обсуждали на очередном семинаре «Измерения и анализ данных в психологии и образовании», который проводится МГППУ и Инобром. 

Пока специалисты могут предложить инструменты измерения двух компетенций — критического мышления и универсальной грамотности. Оба разработаны Центром психометрики и измерений в образовании совместно с факультетом экономических наук Вышки, оба опробованы пока на студентах ВШЭ, но могут применяться и в других вузах. Разработчики рассказали, как устроены эти инструменты.

Исследование Международной лаборатории оценки практик и инноваций в образовании вошло в базу исследований эффективности Лаборатории действий по борьбе с бедностью Абдула Латифа Джамиля (Poverty Action Lab, J-PAL)

The HSE Institute of Education and Abai Kazakh National Pedagogical University have recently entered into a cooperation to advance research and development across an array of domains in education.

Навыки чтения детей на казахском языке можно будет измерить с помощью нового инструмента, а авторы новаторских идей в образовании получат поддержку по российской модели. Это – лишь часть новых возможностей, которые появятся у системы образования Казахстана благодаря договору, который заключили Вышка и Казахский национальный педагогический университет имени Абая. Научные сотрудники Инобра возглавят пять проектов в соседней стране: это и исследования, и передача опыта, обкатанного в российских условиях.

11 марта Институт образования НИУ ВШЭ совместно с Московским государственным психолого-педагогическим университетом (МГППУ) и РАНХиГС провел первое мероприятие в рамках нового научного семинара «Измерения и анализ данных в психологии и образовании». Вебинар «Оценка цифровой образовательной среды университета» привлек внимание более 120 участников из Казани, Петербурга, Краснодара, Владивостока, Орла, Екатеринбурга, Ростова-на-Дону, Кирова, Беларуси и Израиля.

Группа ученых из четырех стран подвела итоги «Супертеста» – масштабного исследования прогресса студентов-инженеров в России, Китае, Индии и США. Исследование впервые позволило отследить, как меняются компетенции в области физики, математики и навыки критического мышления студентов компьютерных наук и электронной инженерии на протяжении учебы, и сопоставить данные четырех стран.

Аспирантская школа по образованию ВШЭ продолжает набор на трек «Измерения и оценивание в образовании». Те, кто на него поступит, смогут участвовать в нескольких масштабных проектах по  созданию новых инструментов измерений в образовании. Их запуск поможет лучше представить российские вузы в мировых рейтингах, повысит мобильность студентов и даст больше шансов выпускникам с российскими дипломами. А инструмент для школы позволит учителям точнее настраивать учебную программу под каждого ученика. Для аспирантов Инобра – это возможность начать научную карьеру с масштабных проектов и стабильной работы в Центре психометрики и измерений в образовании. О трех новых проектах рассказали сотрудники центра Елена Карданова, Екатерина Орел и Алина Иванова.

Аспиранты Инобра начали работать над исследованиями, результаты которых могут способствовать созданию новых автоматизированных сервисов для школьных учителей, в том числе и на базе Учи.ру. Подобные инструменты помогут педагогам индивидуализировать обучение: наблюдать прогресс каждого ученика в классе, измерять эффективность обучения с помощью онлайн-платформ, лучше понимать личные цели и трудности ученика, давать более полную и персонализированную обратную связь.

12 ноября состоялась защита диссертации Инны Вениаминовны на тему «Методология измерения родительской вовлеченности в образование детей». Всеми голосами «За» Инне была присуждена учёная степень кандидата наук об образовании.

Experts at IOE and Yandex have reported findings from a one-of-a-kind massive joint study that they carried out in association with Stanford and the University of California to evaluate whether and how engaging in practices of e-learning contributes to academic performance in primary school. Completing more assignments online can be specifically of aid in catching up those early-graders who fall behind on math literacy, the study suggests.

Институт образования НИУ ВШЭ совместно с компанией Яндекс завершил первый в России масштабный эксперимент по оценке влияния онлайн-технологий на успеваемость школьников. Исследователи пришли к выводу, что выполнение заданий онлайн помогает повысить математическую грамотность, особенно у слабоуспевающих учеников.

Спойлер: онлайн-технологии все-таки повышают успеваемость

Летняя школа на неделю сделала Москву мировой столицей психометрики.

In late March, IOE hosted a closing session for a series of expert seminars on psychometric research and training that were held as part of the Russia Education Aid for Development (READ) program, a joint initiative between the Russian government and the World Bank. The forum brought together a cohort of strategists, institutional leaders, researchers and representatives of other stakeholders from India, Mongolia, Nepal, Vietnam, Armenia, and Tajikistan.

В Институте образования НИУ ВШЭ закончилась серия обсуждений моделей подготовки специалистов по измерениям в психологии и образовании. Знакомиться с опытом нашей магистерской программы "Измерения в психологии и образовании"  и аспирантского трека "Измерения и оценивание в образовании" приехали представители вузов, научных центров, министерств образования Индии, Монголии, Непала, Вьетнама, Армении, Таджикистана.

C 7 по 11 ноября в сразу в двух городах Голландии, Арнеме и Неймегене, прошла 19ая конференция Association for Educational Assessment – Europe. Конференция обединяет исследователей и практиков в области образовательного оценивания.  Сотрудники Центра мониторинга качества образования выступили с докладами и познакомились с последними тенденции психометрики в образовании.

Независимая диагностика развития детей в начальной школе iPIPS+ прошла этой осенью для более чем 5000 учащихся третьих классов из двух регионов. Линейка инструментов iPIPS-iPIPS+ позволяет максимально мягко и точно оценить прогресс учеников начальных классов. Результаты диагностики предоставляются учителю, школе и родителям детей. Они предназначены в помощь учителю, поскольку основаны на учебных стандартах и дают свежий взгляд на продвижение учебного процесса.

IOE is soon to sign a Memorandum of Cooperation with Educational Testing Service, the world’s largest private organization in educational measurement and testing. During their recent visit to ETS Headquarters in Princeton (New Jersey, USA), IOE experts Elena Kardanova and Tatjana Kanonire met with their ETS colleagues to map out the overall scope of the upcoming cooperation and to negotiate preliminary plans in a number of specific areas.

Высшая школа экономики подпишет меморандум о сотрудничестве с Educational Testing Service – крупнейшей в мире негосударственной организацией по измерениям и оценке образования. Это открывает перспективы совместной работы над международными исследованиями и, в частности, возможность стажировки аспирантов Института образования НИУ ВШЭ в штаб-квартире ETS в США. Договоренности об этом были достигнуты представителями Института Еленой Кардановой и Татьяной Канонир в ходе визита в штаб-квартиру ETS в Принстоне.

С 17 по 21 сентября прошел интенсивный курс повышения квалификации. Мероприятие было организовано Институтом образования НИУ ВШЭ, а сотрудники ЦМКО подготовили и провели лекции и мастер-классы об особенностях разработки тестов.

В этом году в Институте образования НИУ ВШЭ будет учиться в два раза больше студентов: к магистерским программам «Доказательная образовательная политика» и «Измерения в психологии и образовании» добавились две новые программы «Педагогическое образование» и «Экономика и управление образованием». Торжественное мероприятие 3 сентября закончилось произнесением клятвы первокурсника у памятника анонимному рецензенту – а после магистрантов ждал квест по исследовательским подразделениям Института. Скоро многим из них предстоит выбрать центр или лабораторию, где они будут работать.

Early this August, a picturesque historic location of HSE’s ‘Kochubey Mansion’ Training Center in Saint Petersburg, Russia welcomed testing professionals from over a dozen countries for IOE’s Fifth International Summer School ‘Applied Psychometrics in Education and Psychology.’ Instruction in the School was given by world-renowned experts in measurements and test development: Dr. Linda Cook (The National Center for the Improvement of Assessment), Dr. Mary Pitoniak (Educational Testing Service), Dr. Carol Myford (University of Illinois at Chicago), and Dr. Lidia Dobria (Wilbur Wright College & University of Illinois at Chicago).

Тест – это внешне просто и привычно, но от ответственности, которая на него порой возложена, может закружиться голова. Несколько ошибок – и вот абитуриент вынужден менять свои жизненные планы. А был ли его экзамен действительно справедливым? Кто может оценить качество теста как эксперт и кто вообще их придумывает?

4 августа в г. Пушкине завершилась 5-я ежегодная летняя школа Applied psychometrics in education and psychology. Школа была организована Центром мониторинга качества образования Института образования НИУ ВШЭ. Два учебных трека вели Dr Linda Cook (The National Center for the Improvement of Assessment), Dr Mary Pitoniak (Educational Testing Service), Dr Carol Myford (University of Illinois at Chicago) и Dr. Lidia Dobria (Wilbur Wright College & University of Illinois at Chicago). В школе обучались психометрики из 12 стран мира.

Поздравляем выпускников, теперь вы психометрики и измерители!

Институт образования НИУ ВШЭ с гордостью сообщает о том, что нашим коллегам Елене Кардановой и Анатолию Каспржаку присвоен почетный статус ординарных профессоров Высшей школы экономики. Решение, принятое коллегией ординарных профессоров и ученым советом НИУ ВШЭ – закономерное признание не только особых заслуг Елены Юрьевны и Анатолия Георгиевича перед нашим вузом, но и их выдающегося вклада в российскую науку об образовании.

На заседании Ученого совета 22 июня было принято решение о присвоении почетного звания (статуса) ординарного профессора преподавателям и сотрудникам Вышки. Также в этот день 16 сотрудникам ВШЭ был впервые присвоен почетный статус «Заслуженный профессор Высшей школы экономики».

14 июня юбилей Елены Кардановой, директора Центра мониторинга качества образования.

О чем говорят навыки детей на старте учебы

В Вороново прошла традиционная Зимняя школа факультета социальных наук!

What is «grit» and why it's time to rethink it

С 23 по 29 июля в учебном центре НИУ ВШЭ «Вороново» состоялась IV ежегодная летняя школа «Теория и практика разработки тестов в психологии и образовании». На протяжении недели участники летней школы знакомились на занятиях преподавателей из США, Голландии, России с новыми подходами к разработке тестов, к разработке заданий, оценивающих выполнение деятельности, с системами оценки качества тестов. На школу приехало более 30 человек из разных городов России, из Казахстана, Киргизии, Беларуси, Азербайджана, Италии. Организатор школы – Центр мониторинга качества образования Института образования НИУ ВШЭ.

Студенты очных магистерских программ Института образования НИУ ВШЭ «Измерения в психологии и образовании» и «Доказательная образовательная политика», испытывающие интерес к научной карьере, могут воспользоваться привилегиями при поступлении в аспирантскую школу по образованию.

В Институте образования ВШЭ состоялась церемония вручения дипломов магистрам очных программ «Доказательная образовательная политика» и «Измерения в психологии и образовании». Выпуск 2017 года стал самым большим за все время существования программ ― 31 магистр!

У каждого студента очных магистерских программ Института образования НИУ ВШЭ есть возможность работать в каком-либо из научных подразделений Института. Благодаря работе в исследовательском центре магистранты не только зарабатывают деньги в дополнение к стипендии, но и практикуются в будущей профессиональной деятельности.

Руководство Центра мониторинга качества образования, Института образования НИУ ВШЭ Виктор Болотов и Елена Карданова, а также сотрудники Центра Алина Иванова и Ирина Брун приняли участие в конференции в рамках технической поддержки Российской программы содействия образованию в целях развития (READ 2).

Чем больше книг в семье, богаче родители и лучше их образование, тем выше шансы у детей хорошо учиться

Качество образования – основная тема форума, насчитывающего в этом году рекордное число участников. Институт образования НИУ ВШЭ, традиционно являющийся соорганизатором мероприятия, делегировал на форум внушительную группу, в которую входят И.Д. Фрумин, В.А. Болотов, С.Г. Косарецкий, А.Г. Каспржак, Ф.Ф. Дудырев, Т.А. Мерцалова и другие сотрудники.

Elena Kardanova, the director of the Centre of Education Quality Monitoring, and Alina Ivanova, junior research fellow of the same centre, have participated in the annual meeting of the American Educational Research Association (AERA) held in Washington, DC. The conference dedicated to ‘Public Scholarship to Educate Diverse Democracies’ took place on April 7–12 and gathered around 14000 participants from all over the world.

Директор Центра мониторинга качества образования Елена Карданова и младший научный сотрудник Центра Алина Иванова приняли участие в Ежегодной конференции AERA. Елена Карданова выступила с докладом в рамках заседания группы «Rasch Measurement Significant interest Group». В истории группы это выступление стало дважды первым: впервые ключевым докладчиком стала женщина, и впервые здесь выступили российские ученые.

The article ‘Developing instruments to assess and compare the quality of engineering education: the case of China and Russia’ by the group of IOE staff members (Elena Kardanova, Prashant Loyalka,  Igor Chirikov, Ekaterina ENchikova) was published on the online platform of the journal ‘Assessment & Evaluation in Higher Education’ issued by Taylor & Francis.

На онлайн-платформе журнала «Assessment & Evaluation in Higher Education», выходящем под эгидой международного академического издательства Taylor & Francis (Великобритания), опубликована статья об измерительных инструментах в образовании, среди авторов которой группа сотрудников Инобра.

Подведены итоги конкурса РНФ по поддержке научных групп – одного из наиболее престижных грантовых конкурсов в стране. В числе победителей конкурса – проект, подготовленный Центром мониторинга качества образования Инобра под руководством Е.Ю. Кардановой, и совместный проект Группы среднего профессионального образования Инобра, возглавляемого Ф.Ф. Дудыревым, и Института анализа предприятий и рынков НИУ ВШЭ.

В феврале состоялась встреча участников проекта «International Study of Higher Education Learning (ISHEL)», на которой были обсуждены основные результаты исследовательской работы в 2014 году, а также согласованы планы на будущий год. С российской стороны во встрече приняли участие директор ЦМКО Елена Карданова, научный сотрудник центра Екатерина Енчикова, а также директор Научно-исследовательского института мониторинга качества образования Владимир Наводнов. Встреча проходила в университете Стэнфорд (США).

Федеральная служба по надзору в сфере образования и науки подвела итоги конкурса на лучший проект по совершенствованию оценки качества образования. В числе победителей — проект Института образования ВШЭ, в числе призеров — проект профессора факультета права ВШЭ Анатолия Нестерова.

28 октября на традиционном семинаре Института образования ВШЭ обсуждалось международное сравнительное исследование iPIPS. В нем изучается развитие детей при поступлении в школу и во время первого года обучения. Исследование было придумано в Великобритании, а специалисты Института образования ВШЭ адаптировали его и впервые провели в России.

Краткосрочная программа повышения квалификации для слушателей из стран СНГ и регионов России.

С 1 по 3 февраля прошла Зимняя школа для абитуриентов магистратуры факультета психологии НИУ ВШЭ.

В Высшей школе экономики разработаны новые контрольно-измерительные материалы (КИМы), ориентированные на проверку компетенций. В 2011 году прошла их апробация, а в этом году с их помощью будет оцениваться уровень подготовки студентов. Об особенностях новых КИМов рассказывает начальник методического управления ВШЭ Александра Серова.

Пять дней, с 26 по 30 января, участники Зимней школы по психологии для абитуриентов магистратуры ВШЭ провели рядом с ведущими преподавателями университета, у которых им, возможно, предстоит учиться на протяжении двух лет.