Человекоподобного робота Hinata с генеративным искусственным интеллектом Gemini для обслуживания пассажиров вывела на станцию Умэда компания Osaka Metro

Источник: The Japan News

Масштабную опытную эксплуатацию полноразмерного человекоподобного робота-дежурного Hinata, оснащенного генеративной нейросетевой моделью Gemini и способного распознавать эмоциональное состояние пассажиров, официально запустил японский транспортный оператор Osaka Metro совместно с телекоммуникационной корпорацией KDDI и робототехнической компанией AVITA на узловой станции Умэда в городе Осака, сообщает издание The Japan News. Проект нацелен на решение проблемы нехватки дежурного персонала в условиях стремительного старения населения Японии и роста международного туристического потока.

Конструктивно робот Hinata обладает ростом сто семьдесят восемь сантиметров, пропорциями взрослого человека и облачен в официальную форменную одежду сотрудников Osaka Metro. Дизайн аппаратной платформы разработан при непосредственном участии ведущего японского профессора робототехники Университета Осаки Хироси Исигуро, возглавляющего компанию AVITA. В отличие от неподвижных сенсорных терминалов, андроид обладает подвижными сочленениями шеи, глаз и рук, позволяя сопровождать устные ответы естественной мимикой, зрительным контактом и указательными жестами в сторону нужных платформ или турникетов.

Вычислительное ядро машины интегрировано с мультимодальной моделью Google Gemini, развернутой на защищенной серверной инфраструктуре оператора KDDI в дата-центре Сакаи с минимальной временной задержкой отклика. Акустическая система робота способна в реальном времени анализировать не только смысл речи человека, но также тембр голоса, интонационные акценты и эмоциональное напряжение собеседника. Это позволяет андроиду гибко подстраивать стиль диалога: отвечать максимально кратко спешащим пассажирам или подробно и участливо объяснять схему пересадки растерявшимся туристам и пожилым людям.

Робот поддерживает синхронный диалог более чем на шестидесяти иностранных языках, включая английский, китайский, корейский, а также свободно владеет местным кансайским диалектом японского языка. На руке андроида закреплен сенсорный дисплей, на который динамически выводятся QR-коды: отсканировав код личным смартфоном, пассажир мгновенно сохраняет в память устройства подробный интерактивный маршрут до нужного вагона, лифта или близлежащей городской достопримечательности.

Встроенный комплекс пространственных датчиков и стереокамер высокой четкости постоянно отслеживает плотность окружающей толпы, автоматически регулируя громкость встроенных динамиков в зависимости от уровня фонового акустического шума прибывающих поездов. Интеллектуальный фильтр подавления помех отсекает посторонние звуки вокзальных объявлений, концентрируясь исключительно на голосе стоящего перед роботом собеседника. При необходимости квалифицированный удаленный оператор-человек может мгновенно перехватить прямое управление роботом через защищенный канал телеприсутствия для быстрого разрешения любых непредвиденных нештатных ситуаций на перроне.

Испытания робота Hinata разделены на два последовательных этапа: с тридцать первого августа по шестое сентября консультации проводятся у северного турникетного павильона станции Умэда, а с девятого по пятнадцатое сентября андроид переместится в восточный вестибюль пересадочной станции Танимати Кюдёмэ. Робот работает ежедневно с одиннадцати утра до восьми часов вечера.

Представители Osaka Metro подчеркнули, что главная цель эксперимента заключается в комплексной оценке психологической готовности пассажиров к взаимодействию с антропоморфными машинами в плотном городском потоке. Корпорация KDDI отвечает за отказоустойчивость скоростного канала мобильной связи пятого поколения и облачную обработку запросов, а стартап AVITA ведет постоянную программную доработку речевых алгоритмов. В случае успешного завершения пилота оператор планирует рассмотреть внедрение постоянных роботизированных стоек информации на крупнейших транспортно-пересадочных узлах региона перед открытием масштабных международных выставок.