Игровой опыт сотен миллионов пользователей Pokemon Go стал фундаментом для новой системы навигации беспилотных доставщиков. Компания Niantic Spatial, разработавшая знаменитую AR-игру, объявила о технологическом партнерстве с Coco Robotics. В рамках этого сотрудничества роботы-курьеры начнут использовать систему визуального позиционирования (VPS) от Niantic, которая обучалась на массиве из более чем 30 миллиардов изображений, собранных игроками за последние десять лет.
От поимки Пикачу до логистики последней мили
Как отмечает генеральный директор Niantic Spatial Джон Ханке, задачи по реалистичному перемещению виртуального покемона в дополненной реальности и безопасному движению автономного робота по городским тротуарам технически идентичны. Система VPS позволяет определять местоположение с точностью до нескольких сантиметров, анализируя близлежащие здания и архитектурные ориентиры через объективы четырех камер, установленных на корпусе робота. Проще говоря, машина ориентируется «по картинке», а не только по спутниковому сигналу.
На практике это решает главную проблему классического GPS — нестабильность сигнала в условиях плотной городской застройки. «Бетонные джунгли» мешают прохождению спутниковых данных, из-за чего навигационные точки могут смещаться, а роботы — теряться или испытывать трудности при переходе дороги. Использование визуальных данных от Niantic позволяет курьерам понимать свое точное положение даже там, где GPS бессилен.
Как собирались данные для обучения
База изображений для VPS формировалась годами благодаря специфике игрового процесса Pokemon Go. Чтобы поймать цифровое существо, пользователи направляли камеры смартфонов на объекты под разными углами. Процесс картографирования ускорился в 2020 году с введением функции «Полевые исследования», где игрокам предлагалось сканировать статуи и достопримечательности в обмен на внутриигровые бонусы. Дополнительным источником данных стали так называемые «боевые арены» покемонов.
Благодаря тому, что одни и те же локации сканировались миллионами людей, разработчики получили 3D-модели объектов в разных погодных условиях, при любом освещении и с разных ракурсов. Даже сейчас, когда пик популярности игры прошел, ее активная аудитория составляет около 50 миллионов человек в месяц, что обеспечивает непрерывный приток визуальной информации.
Будущее живых карт
Партнерство с Coco Robotics рассматривается Niantic как этап создания глобальной «живой карты» мира. Когда роботы-курьеры выйдут на маршруты, они сами станут источниками актуальных данных, непрерывно обновляя визуальную модель среды. Подобный подход сбора данных в реальном времени уже используют лидеры рынка автономного транспорта, такие как Waymo и Tesla.
Кейс с Pokemon Go стал наглядным примером краудсорсинга, когда данные, собранные для развлекательного приложения, находят критически важное применение в промышленной робототехнике спустя десятилетие. Аналогичные механизмы сегментации и распознавания образов ранее приписывали системам CAPTCHA от Google, где пользователи, отмечая светофоры или пешеходные переходы, фактически обучали нейросети для беспилотных автомобилей.