Впервые в истории спутник дистанционного зондирования Земли самостоятельно, без участия операторов на поверхности, обнаружил целевой объект. Это достижение стало первым зарегистрированным случаем применения модели визуально-языкового анализа (VLM) непосредственно на орбите, открывая новую главу в развитии космических датчиков и искусственного интеллекта.
Традиционно спутники выполняют лишь роль «глаз» в космосе: они собирают колоссальные объемы данных и транслируют их на наземные станции. Там аналитики и алгоритмы машинного обучения пытаются разобраться в полученной информации. В данном эксперименте всё произошло иначе: на борту аппарата YAM-9 от компании Loft Orbital было запущено программное обеспечение, разработанное Лабораторией реактивного движения (JPL) NASA. Система была способна интерпретировать запросы на естественном языке и самостоятельно выделять нужные области на снимках.
В основе решения лежит модель Google DeepMind Gemma 3. Она оптимизирована специально для периферийных вычислений, что позволяет ей функционировать на ограниченных аппаратных мощностях в отрыве от мощных дата-центров. Модели класса VLM объединяют глубину понимания контекста LLM со способностью распознавать визуальные образы. В ходе тестов модель успешно справилась с задачами поиска объектов в зонах контакта дикой природы и человеческой деятельности, а также безошибочно идентифицировала инфраструктуру железнодорожных узлов.
Успех эксперимента имеет критическое значение по двум направлениям. В краткосрочной перспективе это повышает эффективность работы спутников за счет первичной обработки данных прямо в космосе, что радикально снижает поток «сырой» информации, передаваемой на Землю. В долгосрочной — это фундамент для создания полноценной интеллектуальной инфраструктуры на орбите.
Пол Лассерр, глава отдела ИИ компании Loft, в интервью TechCrunch отметил: «Это открывает двери для круглосуточного автоматизированного мониторинга. Вы можете задать спутнику логическую задачу, например, следить за конкретным участком границы и оповещать только при обнаружении подозрительной активности».
Разработчики также смотрят в сторону помощи исследователям и экипажам станций. Хуан Дельфа Виктория, технический руководитель группы ИИ в JPL NASA, проводит параллели с научной фантастикой: «Астронавты ограничены в ресурсах, они не могут постоянно работать с клавиатурой для выполнения сложных операций. Наша цель — предоставить им интерактивного помощника, как в фильмах, способного решать задачи по голосовой команде или текстовому запросу».
