Новосибирские студенты займутся разработкой искусственного интеллекта, способного видеть и слышать, сообщило министерство науки и инновационной политики региона.
Разработки ведутся в рамках проекта математического центра в Академгородке, созданного на базе консорциума Института математики и Новосибирского госуниверситета, – «Большой математической мастерской».
В Новосибирске в рамках мастерской команды студентов, школьников и педагогов будут работать над 40 проектами, решать задачи, поставленные заказчиками от индустрии.
«Искусственный интеллект – перспективная сфера, в которой НГУ становится ведущим российским научно-исследовательским и образовательным центром. И для этого создается вся необходимая инфраструктура: так, на площадях объектов второй очереди кампуса мирового уровня НГУ, который в настоящее время строится, предполагается разместить один из мощнейших в России суперкомпьютерных центров», – рассказал ректор НГУ Михаил Федорук.
Одной из команд предстоит поработать над созданием универсальной коммуникативной системы, приближающейся по уровню когнитивных способностей к человеку. В результате таких доработок исследователи дополняют возможности «больших языковых моделей» не только умениями читать и писать, но и видеть и слышать.
Участникам проекта предстоит усовершенствовать систему «сильного» ИИ «Менон», которую разрабатывают в НГУ, путем исследования и доработки мультмодального RAG – одного из подходов, позволяющего научить большую языковую модель видеть и слышать с использованием внешней базы знаний о мире.
Такая система может самообучаться, определять для себя цели и пути их достижения, может быть использована для решения сложных экономических задач, автономного вождения и управления БПЛА, автоматизации и оптимизации промышленных процессов, предотвращения аварийных ситуаций, медицинской диагностики и научных исследований от создания новых материалов и редактирования генов при помощи вычислений до прогнозирования распространения инфекционных заболеваний и изменений климата.
