Домой ИИ и технологии Новое десктопное приложение Gemini: работа без отрыва от контекста

Новое десктопное приложение Gemini: работа без отрыва от контекста

Google выпустила нативное десктопное приложение Gemini для Windows и macOS. Разбираемся в возможностях ИИ-ассистента, функциях Spark и системных требованиях.

9
0

Новое десктопное приложение Gemini: работа без отрыва от контекста

Компания Google представила новое нативное десктопное приложение Gemini, созданное для интеграции ИИ в повседневные рабочие процессы на Windows и macOS. Сервис позволяет пользователям не прерывать рабочий ритм, получая доступ к интеллектуальной помощи непосредственно там, где они работают: от составления документов до поиска творческих идей.

Интерфейс десктопного приложения Gemini на рабочем столе
Помощь там, где она вам нужна. Gemini может подключиться, когда вам требуется поддержка. Делитесь окном, чтобы получать мгновенную помощь на основе того, что вы видите

Возможности и функции Gemini на рабочем столе

Ключевой особенностью приложения стала возможность обмена содержимым экрана с Gemini. Это позволяет нейросети предоставлять ответы на основе того, что именно вы видите перед собой, включая локальные файлы. Например, при анализе сложного графика можно транслировать окно с данными и попросить ИИ выделить три главных вывода — Gemini мгновенно предоставит резюме, опираясь на контекст.

  • Мгновенный доступ: Используйте сочетания клавиш Alt + Space на Windows или Option + Space на macOS, чтобы вызвать Gemini поверх текущей задачи. Это позволяет быстро задавать вопросы, проверять факты или редактировать текст, не покидая активное приложение.
  • Gemini Spark: Ваш персональный ИИ-агент, работающий в режиме 24/7. Он способен брать на себя выполнение многоэтапных задач, связанных с исследованиями, планированием и синтезом информации, действуя автономно, но строго под вашим контролем.
  • Интеграция с сервисами Google: Вы можете напрямую привлекать информацию из Gmail, Google Drive, Документов и Календаря в рабочий процесс. Gemini поможет найти детали в цепочках писем, подвести итоги общих документов или сопоставить данные из заметок о встречах.
  • Инструменты для творчества: В специальном рабочем пространстве можно генерировать изображения с помощью Nano Banana и создавать видео высокого качества под руководством модели Gemini Omni.

Техническая база и развитие Gemini

Gemini — это интерфейс к мультимодальной большой языковой модели (LLM), способной работать с текстом, аудио, изображениями и другими типами данных. Разработка этой технологии опирается на глубокие исследования Google, начавшиеся с публикации статьи Word2Vec в 2013 году, где были предложены архитектуры, сопоставляющие слова как математические концепции. В 2015 году была представлена нейронная диалоговая модель, обученная предсказывать следующее предложение в беседе на основе предыдущих, что сделало общение с ИИ более естественным. Позже последовали прорывы в архитектуре Transformer в 2017 году и развитие функционала многоходового общения в 2020 году.

Экспериментальный запуск Gemini (ранее известного как Bard) состоялся в марте 2023 года в соответствии с принципами Google в области ИИ. С того момента пользователи применяют инструмент для написания электронных писем, отладки кода, поиска идей для мероприятий и обучения сложным концепциям.

Системные требования и доступность

Десктопное приложение Gemini доступно во всех странах и на всех языках, где поддерживаются сервисы Gemini:

  • Windows: Требуется Windows 10 или новее (архитектуры x64 и Arm64).
  • macOS: Требуется компьютер Apple на базе чипа Apple Silicon и установленная macOS Sequoia (15.0) или более новая версия.

Примечание: доступность отдельных функций может варьироваться. Часть возможностей, доступных сегодня на macOS, будет внедрена в версию для Windows со временем.

Как начать работу с приложением

Способы доступа к Gemini

Для быстрого вызова интерфейса предусмотрены следующие инструменты:

  • Windows: Используйте настраиваемую клавишу быстрого доступа (Alt + Space). Также приложение можно запустить через панель задач или иконку в системном трее.
  • macOS: Доступны сочетания Option + Space (мини-чат) и Option + Shift + Space (полноэкранный интерфейс). Также можно использовать иконку в строке меню или в Dock.

Работа с контекстом и учетными записями

Чтобы передать Gemini контекст текущей работы, нажмите кнопку «Добавить файлы и инструменты» (Add files and tools) и выберите «Поделиться окном» (Share window). Для полноценного чтения веб-страниц в браузере (на Mac) необходимо перейти в Системные настройки > Конфиденциальность и безопасность и активировать «Универсальный доступ» для Gemini. При использовании одной и той же учетной записи Google история чатов и память будут синхронизироваться между всеми устройствами: браузером, десктопом и мобильным приложением.

Новые возможности Gemini для Windows и macOS

В любое время на ПК можно нажать комбинацию клавиш Alt + Space, чтобы открыть Gemini поверх текущего рабочего окна. Это позволяет быстро проверить факты в документе или подобрать варианты заголовков для презентации, не прерывая рабочий процесс. Новое приложение обеспечивает доступ ко всем привычным функциям Gemini в рамках выделенного рабочего пространства. Пользователи могут делегировать многоэтапные задачи своему персональному ИИ-агенту Gemini Spark, работающему в режиме 24/7, или поручить ему составить проект отчета, используя информацию из сервисов Google, таких как Gmail и Google Drive.

Приложение также позволяет воплощать творческие идеи прямо на рабочем столе. С помощью Nano Banana можно создавать пользовательские изображения для презентаций, а Gemini Omni 1 дает возможность генерировать высококачественные видео. Приложение отличается легкостью и бесшумной работой, не замедляя производительность ПК. Это лишь начало развития десктопного решения, функциональность которого будет расширяться. Приложение уже доступно пользователям по всему миру на Windows 10 и 11.

Расширение функционала Gemini Spark для macOS

Gemini Spark теперь доступен в приложении для macOS, помогая автоматизировать рутинные задачи на компьютере. Агент способен выйти за пределы окна чата и работать непосредственно с файлами и приложениями. Например, можно попросить Spark отсортировать все PDF-документы из папки «Загрузки» по конкретным директориям. Кроме того, инструмент объединяет рабочий стол и Google Workspace: можно создать таблицу бюджета на основе последних счетов, сохраненных на ПК, и настроить регулярные обновления для нее. В целях безопасности Gemini Spark получает доступ только к тем файлам, на которые пользователь дал разрешение.

В ближайшем будущем появится возможность удаленного выполнения задач. Пользователь сможет дать многоэтапное поручение со смартфона — например, найти отчет о продажах на Mac, извлечь итоговую сумму выручки и отправить ее по почте — и позволить компьютеру выполнить работу в отсутствие владельца. На текущий момент версия Gemini Spark для macOS доступна в бета-режиме для подписчиков Google AI Ultra в возрасте от 18 лет, проживающих в США.

Интеграция с внешними сервисами

Расширился список приложений, подключенных к Spark. Теперь инструмент взаимодействует с Google Tasks и Google Keep, что позволяет анализировать заметки в Keep и преобразовывать их в задачи в Tasks. Также внедряются интеграции с Canva, Dropbox, Instacart, OpenTable и Zillow Rentals. Это дает возможность проектировать макеты, управлять файлами, бронировать столики, заказывать продукты или записываться на осмотр арендуемого жилья. Эти возможности станут доступны в веб-версии и мобильном приложении Gemini Spark в течение недели, а на macOS — в ближайшие недели. Дополнительно вводится поддержка протокола контекста модели (MCP), позволяющая подключать сторонние приложения напрямую к Spark для персонализации помощника.

Мониторинг событий в реальном времени

Gemini Spark получил способность интеллектуально отслеживать темы и реагировать на события в реальном времени. Например, после завершения футбольного матча Spark предоставит ключевые моменты и аналитику. Также можно настроить отправку детального финансового отчета при достижении акциями определенного порога. Spark может мониторить блоги, новостные ресурсы, социальные сети, финансовые показатели, прогнозы погоды и спортивные данные в дополнение к электронной почте, избавляя пользователя от необходимости постоянно обновлять страницы вручную.

Расширение возможностей взаимодействия и автоматизации

Помимо базовых функций, Google активно работает над тем, чтобы сделать Gemini частью глубоко интегрированной экосистемы. Важной вехой стало развитие протокола Model Context Protocol (MCP). Эта поддержка дает пользователям возможность подключать свои любимые приложения напрямую к Spark, что позволяет создавать по-настоящему персонализированного помощника, адаптированного под специфические инструменты конкретного специалиста.

В рамках обновления Gemini Spark был значительно усилен блок мониторинга в реальном времени. Если раньше взаимодействие ограничивалось разовыми запросами, то теперь ИИ-агент способен самостоятельно отслеживать изменения и оперативно реагировать на внешние события. Например, пользователь может делегировать агенту контроль за важными новостными сайтами, финансовыми сводками или даже прогнозом погоды. Spark самостоятельно проанализирует данные и предоставит отчет в нужный момент — будь то завершение спортивного матча или изменение котировок акций до заданного порога, что избавляет от необходимости совершать «ручные» проверки и постоянно обновлять вкладки в браузере.

Особое внимание разработчики уделили безопасности данных при взаимодействии с локальными ресурсами. Чтобы обеспечить конфиденциальность, Gemini Spark работает по принципу «разрешенного доступа»: агент получает возможность взаимодействовать только с теми файлами и папками, к которым пользователь предоставил явный доступ. Этот подход гарантирует, что ИИ не будет «видеть» лишнюю информацию, оставаясь строго в рамках заданных полномочий.

В ближайшем будущем функциональность десктопного опыта станет еще более мобильной благодаря внедрению дистанционного управления. Это позволит пользователям поручать выполнение сложных, многоэтапных задач непосредственно со своего смартфона. Так, находясь вне дома или офиса, можно будет дать указание через телефон — например, найти конкретный отчет о продажах на Mac, извлечь из него итоговые показатели выручки и отправить полученные данные по электронной почте. Компьютер автоматически выполнит эту последовательность действий в фоновом режиме, пока владелец находится в пути или занят другими делами.

На данный момент расширенные функции Gemini Spark для macOS проходят стадию бета-тестирования. Доступ к ним открыт для подписчиков плана Google AI Ultra, достигших 18-летнего возраста, на территории США. Внедрение новых интеграций с такими сервисами, как Canva, Dropbox, Instacart, OpenTable и Zillow Rentals, проходит поэтапно: в течение ближайшей недели эти возможности появятся в веб-версии и на мобильных устройствах, а в течение последующих недель станут доступны пользователям приложения для macOS.

Источник: https://www.techspot.com