Методы и наборы данных для оценки моделей информационного поиска и обработки естественного языкаMethods and datasets for evaluating information retrieval and natural language processing models

Диссертационная работа посвящена методам оценки широкого спектра моделей информационного поиска и обработки естественного языка. В рамках работы предложены методы оценки веб-сниппетов, машинного перевода и распознавания юмора, которые сочетают автоматические подходы и подходы на основе краудсорсинга. Разработаны новые подходы к оценке и повышению качества, удобства и безопасности веб-поиска на основе анализа лога вопросов и информационных потребностей пользователей. Особое внимание уделено оценке качества и устойчивости переноса обучения между наборами данных и языками в задачах ранжирования, вопросно-ответного поиска, распознавания юмора. Разработаны новые подходы к автоматизированному созданию наборов данных для обучения и оценки вопросно-ответных моделей, моделей извлечения информации, моделей распознавания и интерпретации юмора. На основе предложенных методов создан и опубликован ряд новых наборов данных на русском языке. Полученные в работе результаты имеют важное теоретическое и практическое значение и вносят существенный вклад развитие методов информационного поиска и анализа текстов.