Яндекс сообщил об успешной сдаче ЕГЭ языковой моделью YandexGPT 2. Нейросеть смогла набрать 55 баллов при прохождении заданий в рамках ЕГЭ по литературе. Нижний порог — 40 баллов.
В рамках экзамена оценивались знания, стиль письма, эрудиция и творческие способности. Это первый в России случай, когда ИИ сдаёт экзамен с творческими заданиями. Сложность эксперимента в том, что в базе данных YandexGPT 2 не были записаны ответы на вопросы экзамена. Для эксперимента использовались варианты ЕГЭ из тренировочных экзаменов 2021–2023 годов.
Стандартным тестом для оценки эрудиции языковых моделей в мире считается MMLU: он включает вопросы разной степени сложности из 57 областей знания. Так можно объективно сравнить несколько нейросетей, но нельзя оценить качество их ответов на открытые или творческие вопросы. Именно поэтому мы предложили YandexGPT 2 сдать ЕГЭ по литературе.
Алексей Гусаков Технический директор «Поиска» Яндекса
Частные объявления в Москве, в Московской области и в России
Smi24.net — ежеминутные новости с ежедневным архивом. Только у нас — все главные новости дня без политической цензуры. "123 Новости" — абсолютно все точки зрения, трезвая аналитика, цивилизованные споры и обсуждения без взаимных обвинений и оскорблений. Помните, что не у всех точка зрения совпадает с Вашей. Уважайте мнение других, даже если Вы отстаиваете свой взгляд и свою позицию. Smi24.net — облегчённая версия старейшего обозревателя новостей 123ru.net. Мы не навязываем Вам своё видение, мы даём Вам срез событий дня без цензуры и без купюр. Новости, какие они есть —онлайн с поминутным архивом по всем городам и регионам России, Украины, Белоруссии и Абхазии. Smi24.net — живые новости в живом эфире! Быстрый поиск от Smi24.net — это не только возможность первым узнать, но и преимущество сообщить срочные новости мгновенно на любом языке мира и быть услышанным тут же. В любую минуту Вы можете добавить свою новость - здесь.
FT: двое граждан Болгарии якобы шпионили в пользу РФ
Врач Алимова рассказала об особенностях использования солнцезащитного крема
Спартак уступил Нефтехимику в овертайме: драматическая развязка 4:3
«Лёша там в рехабе, а я лижу карточки»: Айза высмеяла инициативу лишить её родительских прав — БлокнотРУ — Новости шоу бизнеса. Новости шоу-бизнеса России сегодня. Новости шоу-бизнеса. Новости шоу-бизнеса России. Новости шоу бизнеса России сегодня. Последние новости шоу бизнеса России. Скандалы шоу бизнеса. Шоу бизнес России сегодня. Новости шоу бизнеса России 28 ноября 2024.
