Функция мультипоиска Google позволяет выполнять поиск с помощью текста и изображений одновременно

Это часть постоянных усилий Google по использованию искусственного интеллекта для «создания информационного опыта, который является по-настоящему разговорным, мультимодальным и персонализированным»

В четверг Google начал внедрять новую функцию поиска, которая позволит пользователям искать информацию, используя как текст, так и изображения одновременно. Новая функция мультипоиска является частью продолжающихся усилий Google по использованию искусственного интеллекта для «создания информационного опыта, который является действительно разговорным, мультимодальным и личным», как недавно заявил генеральный директор Google Сундар Пичаи. 

Функция мультипоиска встроена в Google Lens, инструмент распознавания изображений, доступный через приложение Google. На данный момент функция доступна в бета-версии для пользователей из США, выполняющих поиск с помощью текста на английском языке. Он также ориентирован на поиск покупок. 

Например, пользователь может сделать скриншот оранжевого платья и добавить слово «зеленый» к своему запросу, чтобы попытаться найти такое же платье в этом цвете. Это также полезно для некоммерческого поиска; Пользователь может сфотографировать растение розмарина и добавить запрос «Инструкции по уходу», чтобы выяснить, как ухаживать за своим новым растением. 

Чтобы воспользоваться этой функцией, нужно открыть приложение Google, нажать на значок камеры объектива, а затем найти скриншот или сделать новый снимок. Затем вы проводите пальцем вверх и нажимаете кнопку «+ Добавить в поиск», чтобы добавить текст. 

В своем блоге в четверг Google заявила, что также изучает способы улучшения этой функции с помощью MUM (Multitask Unified Model), новейшей модели искусственного интеллекта Google. Технический гигант недавно поделился тем, как он использует MUM и другие модели искусственного интеллекта для более эффективного предоставления информации о кризисной помощи людям, ищущим помощи.

Еще в феврале, во время конференц-звонка Google в четвертом квартале, Пичаи рассказал об инвестициях Google в модели искусственного интеллекта, которые обеспечивают мультимодальный поиск. 

«В 2022 году мы будем сосредоточены на развитии наших знаний и информационных продуктов, включая поиск, карты и YouTube, чтобы быть еще более полезными», — сказал он. «Инвестиции в искусственный интеллект будут иметь ключевое значение, и мы продолжим совершенствовать диалоговые интерфейсы, такие как Assistant».

Он добавил: «От MUM до Pathways, BERT и многого другого, эти глубокие инвестиции в искусственный интеллект помогают нам лидировать в качестве поиска».