Lens навчили відповідати на запитання про рухомі об’єкти

Google оновив застосунок із функціями доповненої реальності Lens, додавши відповіді на запитання про рухоме навколишнє середовище.

Користувачі продукту на Android і iOS можуть знімати відео і ставити запитання про об’єкти, що цікавлять. Lens використовує ШІ-модель Gemini для розуміння контексту.

«Припустимо, ви хочете дізнатися більше про якусь цікаву рибу. Lens підготує огляд, що пояснює, чому вони плавають по колу, а також надасть додаткові ресурси та корисну інформацію», — зазначив директор із продукту в компанії Лу Ванг.

Експериментальна функція представлена англійською мовою. Для доступу до неї потрібно зареєструватися в програмі Google Search Labs і активувати «AI Overviews and more».

Штучний інтелект використовується для розуміння того, які об’єкти в кадрі найцікавіші, найзначущіші та відповідають поставленому питанню.

Крім відео можна використовувати пошук інформації за допомогою зображення. Для цього потрібно зробити знімок і поставити запитання голосом.

Також Lens поліпшений у сфері електронної комерції. Додаток здатний розпізнавати продукт на фотографії та надавати інформацію про нього: ціну, бренд, відгуки, наявність запасів.

«Припустимо, ви побачили рюкзак, і він вам сподобався. Ви можете використовувати Lens, щоб ідентифікувати цей продукт і миттєво побачити деталі, які вас зацікавлять», — зазначив Ван.

Тим часом один із керівників проєкту для генерації відео Sora пішов з OpenAI та приєднався до DeepMind — ШІ-підрозділу Google.

Протягом останніх кількох місяців від розробника ChatGPT пішла низка ключових співробітників. Це сталося на тлі повідомлень про бажання Сема Альтмана змінити корпоративну структуру компанії.

Нагадаємо, ЗМІ дізналися про роботу Google над штучним інтелектом, який «думає».

У середині вересня ШІ-стартап OpenAI представив нову велику мовну модель o1, навчену методом із підкріпленням для виконання складних міркувань.