СГТУ разработал уникального ИИ-гида для музеев с живой мимикой и жестами

Пресс-служба Саратовского государственного технического университета имени Юрия Гагарина (СГТУ) объявила о разработке виртуального ассистента для музеев, основанного на искусственном интеллекте (ИИ). Программа способна вести диалог с посетителями, демонстрировать экспонаты и предоставлять интересные факты.

Уникальность проекта заключается в возможности синхронной генерации реплик, жестов и анимации. Анимированная 3D-модель сопровождает свою речь естественными движениями и адаптированной артикуляцией.

Ответы генерируются нейросетью в реальном времени, а не воспроизводятся из заранее записанных аудиодорожек.

Система построена на интеграционном каркасе, включающем LLM-модель, сервис синтеза речи и модуль планирования действий. Это создает эффект живого общения и позволяет гиду работать по заранее заданной тематике.

Организаторы фестиваля археологии и реконструкции «Укек», а также представители музея «Россия — моя история» в Саратове уже проявили интерес к новой разработке. Для первого проекта планируется создание базы данных по истории Увекской археологической экспедиции, которая ведется более 20 лет.

Кроме того, виртуального помощника намерены использовать в самом университете. Он будет оказывать помощь абитуриентам и первокурсникам Института прикладных информационных технологий и коммуникаций СГТУ.