Яндекс сообщил об успешной сдаче ЕГЭ языковой моделью YandexGPT 2. Нейросеть смогла набрать 55 баллов при прохождении заданий в рамках ЕГЭ по литературе. Нижний порог — 40 баллов.
В рамках экзамена оценивались знания, стиль письма, эрудиция и творческие способности. Это первый в России случай, когда ИИ сдаёт экзамен с творческими заданиями. Сложность эксперимента в том, что в базе данных YandexGPT 2 не были записаны ответы на вопросы экзамена. Для эксперимента использовались варианты ЕГЭ из тренировочных экзаменов 2021–2023 годов.
Стандартным тестом для оценки эрудиции языковых моделей в мире считается MMLU: он включает вопросы разной степени сложности из 57 областей знания. Так можно объективно сравнить несколько нейросетей, но нельзя оценить качество их ответов на открытые или творческие вопросы. Именно поэтому мы предложили YandexGPT 2 сдать ЕГЭ по литературе.
Алексей Гусаков Технический директор «Поиска» Яндекса
Частные объявления в Москве, в Московской области и в России
Smi24.net — ежеминутные новости с ежедневным архивом. Только у нас — все главные новости дня без политической цензуры. "123 Новости" — абсолютно все точки зрения, трезвая аналитика, цивилизованные споры и обсуждения без взаимных обвинений и оскорблений. Помните, что не у всех точка зрения совпадает с Вашей. Уважайте мнение других, даже если Вы отстаиваете свой взгляд и свою позицию. Smi24.net — облегчённая версия старейшего обозревателя новостей 123ru.net. Мы не навязываем Вам своё видение, мы даём Вам срез событий дня без цензуры и без купюр. Новости, какие они есть —онлайн с поминутным архивом по всем городам и регионам России, Украины, Белоруссии и Абхазии. Smi24.net — живые новости в живом эфире! Быстрый поиск от Smi24.net — это не только возможность первым узнать, но и преимущество сообщить срочные новости мгновенно на любом языке мира и быть услышанным тут же. В любую минуту Вы можете добавить свою новость - здесь.
Филиал № 4 ОСФР по Москве и Московской области напоминает:
С начала года сотрудники контакт-центра Отделения СФР по Москве и Московской области проконсультировали более 880 тысяч граждан
Алексей Тузов для РБК Autonews:В России возник дефицит оригинальных запчастей
Лето на верховых болотах Ленинградской области
Между городами Урала и Москвой запустят свыше сорока дополнительных поездов
