Мы видели, как собака-робот Спот бегает, прыгает и даже танцует... но теперь мы можем увидеть, как Спот разговаривает. В видеоролике, выпущенном Boston Dynamics, мы видим, как собака-робот в высокой шляпе, с усами и пронзительными глазами разговаривает с сотрудниками с британским акцентом и водит их на экскурсию по объектам компании.
«Можем ли мы начать наше путешествие?» – спросил Спот. «Зарядная станция — это место, где робот Банбан отдыхает и подзаряжается, и это первое место, которое мы собираемся посетить. Пожалуйста, следуйте за мной, джентльмены». Как показано в демо-версии, Спот может отвечать на вопросы и даже открывать свой «пасть», создавая ощущение, что он действительно разговаривает.
Чтобы заставить Spot «говорить», Boston Dynamics использовала API ChatGPT OpenAI и некоторые модели больших языков (LLM) с открытым исходным кодом для тщательной подготовки своих ответов. Затем робот оснастили динамиком, добавили возможности преобразования текста в речь и позволили ему «имитировать речь», как рот марионетки.
Мэтт Клингенсмит, главный инженер-программист Boston Dynamics, рассказал, что команда предоставила Споту «очень краткий сценарий», охватывающий каждую комнату на территории компании. Затем робот объединяет сценарий с изображениями, которые он получает с камер на своем захвате и корпусе, предоставляя ему «больше информации о том, что он видит, прежде чем он отреагирует». По данным компании, Spot использует визуальную модель ответов на вопросы, чтобы подписывать изображения и отвечать на вопросы о них.
«Фэнси Батлер» — не единственная роль, которую Спот играет в видео. Четвероногий робот также воплощается в образе археолога 1920-х годов, подростка и шекспировского путешественника во времени. Когда его попросили написать хайку, он также сказал: «Генератор тихо гудит в комнате, генератор тихо гудит в безрадостной комнате, совсем как моя душа».
Компания Boston Dynamics заявила, что обнаружила нечто неожиданное, экспериментируя со Спотом в качестве гида. В какой-то момент команда спросила Spot, кто его «родители», и в итоге подошла к старой модели Spot, выставленной в офисе компании. Компания также отметила, что в некоторых случаях LLM все же выдумывала вещи, например, когда Stretch, робот, который она разработала для перемещения коробок, был создан для йоги.
«Мы рады продолжить исследование пересечения искусственного интеллекта и робототехники», — написал Клиненсмит в сообщении на сайте Boston Dynamics. «Эти модели (LLM) могут помочь обеспечить культурный контекст, общие знания здравого смысла и гибкость, которые полезны для многих роботизированных задач — например, возможность назначать задачи роботу, просто разговаривая с ним, поможет снизить кривую обучения для использования этих систем».
Хотя на видео Спот звучит и выглядит глупо, трудно не вспомнить о способности робота, похожего на собаку, открывать двери и шпионить за людьми. В конце концов, он в любой момент может стать инструментом полиции и военных.