В «Google Объективе», позволяющем искать контент в Сети по фотографиям, теперь есть ещё и поиск по видео. Например, увидев рыбку в аквариуме, совершающую какие-то непонятные действия, вы можете записать ролик, чтобы понять, чем же таким она занимается.
Для этого достаточно открыть приложение «Google Объектив» на смартфоне и зажать кнопку съёмки. Причём в этот момент ещё и можно задать свой вопрос голосом — например, «Почему эти рыбы плавают вместе?». Искусственный интеллект Gemini обработает запрос и тут же даст ответ.
По словам вице-президента по разработке Google Раджана Пателя, сервис записывает видео как серию изображений и обрабатывает их с помощью технологий компьютерного зрения. Затем собранная информация передаётся специальной модели Gemini, которая умеет понимать последовательность кадров и находить ответ на поставленный вопрос в Сети.
Сервис пока не может определять звуки — например, пение птиц на видео. Но, как рассказал Патель, с этим компания тоже экспериментирует.
Нововведение скоро должно стать доступно в «Google Объективе» для Android и iOS по всему миру. Пока, правда, функция будет работать только на английском языке.