Обозреватель издания The Verge предоставил свой дом как площадку для испытаний новой программы лаборатории искусственного интеллекта (ИИ) Gemini for Home от Google.
Система «Умного дома» в течение трех суток наблюдала за происходящим, описывая это в своих комментариях. Впечатление у журналиста сложилось двоякое: с одной стороны, ИИ гораздо предметнее описывал происходящее, с другой — делал досадные ошибки, которые ,по мнению обозревателя, критичны для такой программы.
Например, программа использует приложение Google Home, который интерпретирует изображения с камер и, в сочетании с функцией распознавания лиц Nest, дает более подробную информацию о людях и предметах.
Исследователи добились улучшения описательной части людей, животных и предметов. Так, ИИ не только указывает на то, что видит человека, но и идентифицирует его, дает информацию — во что он одет, а вместо сообщения о том, что обнаружено животное, программа уточняет, что это собака.
Хотя не обошлось без существенных накладок.
К сожалению, несмотря на то, что современные программы ИИ от Google улучшают свои характеристики, они, по заявлению Ars Technical, иногда «придумывают» несуществующих людей, путают собаку с оленем.
К слову, также «хромает» привязка человека к действиям — если не убирать принесенную посылку, программа идентифицирует любого появляющегося в кадре человека как доставщика.
Использование ИИ для считывания информации с камер видеонаблюдения дает расширенную интерпретацию событий и объектов, — над этим сейчас работают также такие технологичные компании как Ring, Arli, Wyze.
Серьезное усовершенствование этих программ с подключением к системам «Умного дома» искусственного интеллекта позволит человеку в значительной степени обезопасить свое жилье, своих близких. Иначе говоря, данная функция ИИ сегодня очень востребована.
Но если в проведенном 72-часовом эксперименте ИИ легко решал задачу поиска и отслеживания домашнего кота хозяина, то в некоторых других случаях он серьезно ошибся. Например, однажды перепутал собаку с лисой, а в другой раз, когда хозяин дома вышел с ружьем, искусственный интеллект сообщил, что у него с собой садовый инструмент.
Интерпретации Gemini также оказались, мягко говоря, несколько избирательными. Хозяин дома пытался заставить ИИ сказать, что в руках у него нож — он даже угрожающе размахивал им перед камерой. Но ИИ смог только описать действия журналиста словами «рубить» или «резать», не сообщив о самом ноже. А нож был выбран большой…
Это уже значительные «галлюцинации» программы, которая предназначена для повышения защиты дома. В этих направлениях компании Google есть над чем работать.
Хозяйка жилища, которая также участвовала в эксперименте, заявила по его итогам, что хотела бы знать, есть ли кто-то с пистолетом на крыльце дома или размахивает ли кто-то ножом в ее доме. Но этого пока программа Gemini for Home не позволяет достичь.
Описания ИИ для уличных камер показались обозревателю The Verge полезными, но Gemini не убедила его начать использовать камеры внутри дома — программа нуждается в доработке. Она, со слов журналиста, пока больше пугает, чем помогает.
Мы продолжим следить за событиями в отрасли.