Бостон Динамикс поразил мир новым роботизированным чудом! Теперь их последний робот способен не только ходить и прыгать, но и общаться со всеми вокруг. Впечатляющая комбинация технологий и искусственного интеллекта!
В революционном развитии инженерная компания Boston Dynamics интегрировала ChatGPT, сложную модель языка, разработанную OpenAI, в одного из своих удивительных роботов, Spot. Этот собачий компаньон теперь оснащен возможностью проводить экскурсии по зданию, предоставляя содержательные комментарии к каждому экспонату в пути.
Spot претерпел замечательное преобразование, теперь обладая выбором характерных личностей. В зависимости от выбранной персоны, голос, тон и персонализированные замечания робота соответствующим образом адаптируются.
Для восприятия окружающей среды Spot использует модели визуального вопросно-ответного (VQA), способные генерировать подписи к изображениям и давать краткие ответы на вопросы о них. Эти визуальные данные обновляются примерно раз в секунду и передаются системе в виде текстового запроса.
Коммуникативные возможности Spot также были усовершенствованы путем добавления специально разработанного вибрационно-устойчивого крепления для динамика Respeaker V2, микрофона с кольцевым массивом светодиодов. Это инновационное оборудование без проблем интегрируется с грузом EAP 2 Spot через USB.
Управление роботом осуществляется с помощью внешнего компьютера, настольного ПК или ноутбука, который общается с Spot через его набор инструментов разработки программного обеспечения (SDK). Был разработан простой сервис Spot SDK для облегчения аудио-коммуникации с EAP 2.
Что касается устных ответов, Spot полагается на сервис текста в речь ElevenLabs. Для оптимизации времени ответа инженеры разработали систему, в которой текст передается инструменту параллельно в виде “фраз”, а полученный аудио-файл воспроизводится последовательно.
Добавив немного характера, Spot теперь обладает возможностями мимики. Он может определить и отслеживать движущиеся объекты, что позволяет определить местоположение ближайшего человека и ориентировать свою руку на него. Чтобы создать игривый эффект, к сгенерированной речи был применен фильтр нижних частот, имитирующий движение рта куклы. Этот эффект дополняется комическими костюмами на захвате и наклеенными глазками.
Один из самых интересных аспектов этого эксперимента заключается в врожденной логике ИИ, которая требовала минимальной настройки. Когда Spot был спрошен о своих “родителях”, он удивительным образом переместился в место, где находились его предшественники, с юмором объявив их своими “старшими”. Это свидетельствует о способности модели устанавливать статистические связи между концепциями без подразумевания сознания.
Однако стоит отметить, что демонстрация имеет свои ограничения. Spot, как и многие языковые модели, иногда может испытывать галлюцинации, генерируя фиктивную информацию. Интересным примером этого явления является статья, рассказывающая о городе, вдохновленном игрой Sims, населенном ИИ-агентами. Кроме того, есть небольшая задержка в ответах, и пользователи иногда испытывают ожидание около шести секунд.
Несмотря на эти незначительные проблемы, этот проект является значительным шагом вперед в исследованиях на пересечении робототехники и ИИ. Boston Dynamics нацелена на дальнейшее исследование этого соединения технологий с целью улучшения робототехнической производительности в средах, ориентированных на человека. Это многообещающее начинание имеет потенциал изменить способ взаимодействия с машинами и открыть новую эру интеллектуального партнерства.
Оригинальная статья: ChatGPT Takes a Walk on the Robotic Side: Boston Dynamics’ Latest Mechanical Marvel Now Talks Back.
Если вам нужны рекомендации по управлению ИИ в бизнесе, свяжитесь с нами по адресу hello@itinai.com. Чтобы быть в курсе последних новостей об ИИ, подписывайтесь на наш Telegram-канал t.me/itinairu.
Посмотрите на практический пример решения на основе ИИ: бот для продаж от itinai.ru/aisales, созданный для автоматизации общения с клиентами круглосуточно и управления взаимодействием на всех этапах пути клиента.
Изучите, как искусственный интеллект может улучшить ваши продажи и общение с клиентами. Познакомьтесь с нашими решениями на сайте itinai.ru