Превратить мир в векторную базу данных

Grab рассказал, что разрабатывает систему под названием KartaVision (https://kartavision.com/), которая превращает панорамные снимки улиц в эмбеддинги — цифровые векторы, «понятные» ИИ, по которым можно искать запрошенные объекты. Если раньше изображения просто хранились и отображались на сайте, то теперь они индексируются и становятся частью единой базы данных. Для этого Grab использует комбинацию моделей: свою для первичного отбора, и модель OpenAI — для более точного распознавания.

В ходе демонстрации нам показали, как по простому запросу “mcdonald's” система выдала все панорамы, на которых виднеется эта вывеска. А вот с “Ferrari” так не вышло — вероятно, потому что Феррари на индонезийских улицах оказалось немного и модель начала галлюцинировать. На сайте можно протестировать сервис самостоятельно, работает правильно не со всеми запросами.

Зачем им это нужно? В компании привели несколько сценариев использования: например, алгоритмы могут автоматически находить дорожные ямы, перекопанные участки или повреждения дороги и строить маршруты в обход. Также поиск в картах станет более умным — появится возможность искать здания и заведения по описанию и ключевым словам, а не по адресу. Параллельно Grab сможет продавать дополнительный уровень аналитики бизнесу: например, бренды смогут узнавать, где и как часто видны их вывески, а городские службы — отслеживать состояние инфраструктуры без выезда на места.

Главная сложность в том, что для нормальной работы такого сервиса база данных должна постоянно обновляться. А где взять эти данные? Grab хочет решить эту проблему, поставив съёмку улиц на поток. Компания уже проводит регулярные съёмки, а в будущем хочет задействовать собственных курьеров и подрядчиков. История с курьерами кажется логичной, ведь они весь день ездят по городу и могут автоматически фиксировать изменения, такой подход уже частично используется.

В итоге Grab мечтает произвести революцию в индустрии цифровых карт. Если раньше компании грезили о цифровом двойнике мира, то сегодня хотят внедрить цифровую память улиц, которую можно индексировать, искать и монетизировать.

#tiaconference2025