Практический опыт Google Project Astra

С последним цифровым помощником Google нужно еще доработать, прежде чем он будет готов к потребительскому использованию.

Ключевые выводы

• Основной доклад Google I/O 2024 был посвящен искусственному интеллекту в Android 15, где был представлен мультимодальный помощник Project Astra.
• Проект Астра впечатлил, но показал потенциальные ограничения из-за аллитеративных причуд Близнецов и недостатков памяти.
• Несмотря на некоторые ошибки, Проект Астра предлагает заглянуть в будущее помощи ИИ, которому до совершенства еще далеко.
мкл>

В презентации, которая растянулась на два часа, в основном докладе I/O 2024 не хватало впечатляющих демонстраций, которыми конференция разработчиков Google была известна в прошлые годы. Лишь немногие из тизеров, которыми компания поделилась во вторник, вызвали такой ажиотаж, как ее первая демонстрация того, что в конечном итоге станет инструментом Pixel’s Magic Eraser, еще в 2017 году.

Google продемонстрировал мультимодального ИИ-помощника, который мог видеть, слышать, разговаривать и, что самое впечатляющее, запоминать.



п>

Так продолжалось до тех пор, пока генеральный директор DeepMind Демис Хассабис не вышел на сцену, чтобы анонсировать проект Astra. В последовавшей за этим двухминутной демонстрации Google продемонстрировала мультимодального ИИ-помощника, который мог видеть, слышать, общаться и, что самое впечатляющее, запоминать. В последние моменты демонстрации эта последняя возможность была продемонстрирована, когда человек за кадром спросил программу, помнит ли она, что видела его очки. Аудитория разразилась аплодисментами, когда помощник, работающий на модели Google Gemini 1.5 Pro, сказал, что видел пару очков на столе, который видел всего несколько минут назад. п>

После финальной речи я увидел ассистента в действии. п>

В конце демонстрации Хассабис, к удивлению всех присутствующих, объявил, что у Google есть живая демонстрация Project Astra, которую можно показать участникам после основного выступления. После финального выступления мне удалось увидеть ассистента в действии. То, что я увидел, было впечатляющим, но это также свидетельствовало о том, что Google предстоит еще много работы, прежде чем Project Astra станет достаточно надежным, чтобы его можно было отправить потребителям. п>



Что происходит, когда немецкая овчарка, мышь и фламинго заходят в демонстрация ИИ?

В первой части пресс-демо Google продемонстрировал навыки аллитерации Близнецов. Сотрудник Google положил перед камерой несколько плюшевых игрушек, в том числе банан и хот-дог, и задал ассистенту вопросы об этих объектах. Я признаю, что некоторые ответы были умными. Что касается хот-дога, например, программа сказала, что он может быть частью «аккуратного обеда». To nosh, как я позже узнал, означает перекусить. Полные баллы за творчество. п>

Позже в той же демонстрации сотрудник, ведущий витрину, попросил Близнецов рассказать что-нибудь о пищевой ценности продуктов на столе. Вместо того чтобы сказать что-то существенное, Близнецы обратились к банальности, отметив, насколько «красочно» продукты — отличный способ питаться здоровой пищей. Сотрудник пытался побудить Близнецов дать более содержательный ответ, но безуспешно. Затем они признали, что тот факт, что Близнецы были ограничены аллитерацией своего ответа, мог сбить ИИ с толку. п>



Незавершенный проект, но Google демонстрирует уверенность

Два сотрудника, проводивших демонстрацию, сразу же напомнили нам одну вещь: Project Astra — это не готовый продукт. Это может показаться странным признанием, но, если честно, было приятно видеть, что Google не пытается скрыть недостатки Gemini, организовав слишком отполированную демонстрацию. Действительно, за те 10 минут, что мне удалось увидеть его в действии, программа допустила множество ошибок. п>

Было приятно видеть, что Google не пытается скрыть недостатки Gemini, создавая слишком отполированную демонстрацию. п>

Например, ближе к концу демонстрации один из сотрудников Google попросил Близнецов запомнить названия трех плюшевых животных, которые она положила перед камерой. По порядку были немецкая овчарка Сэм, мышонок Джордж и фламинго Лили. Затем она задала Близнецам вопросы о мягких игрушках, в том числе о порядке, в котором она разместила их перед камерой, и здесь у программного обеспечения возникли проблемы. Не удалось правильно расположить плюшевые игрушки. п>

"Джордж был первым другом, которого ты мне представил»," — сказал Близнец с типичной для ИИ уверенностью. Надо отдать должное, программа признала свою ошибку, когда сотрудник указал на ошибку. «Да, ты прав. Сэм был первым». п>

Является ли Астра лучшим партнером Pictionary?

Но даже принимая во внимание эти ошибки, я чувствовал, что вижу проблеск будущего. Может быть, не тот, который предполагает общий искусственный интеллект, но, по крайней мере, что-то, что может быть полезно миллионам людей, особенно людям с ограниченными возможностями. п>

«Это отличная фигурка», — сказал он. — заявил Близнецы, увидев рисунок. «Это очень лестно», — сказал он. — заметил сотрудник. п>

Моя любимая часть демонстрации: два сотрудника играют в Pictionary с Близнецами. Один из рабочих начал рисовать фигурку. «Это отличная фигурка», — сказал он. — заявил Близнецы, увидев рисунок. «Это очень лестно», — сказал он. — заметил сотрудник. Затем они добавили смайлик черепа, чтобы фигурка держала его, и попросили Близнецов угадать. "Это Гамлет?" – спросил помощник. «Да, это правда», — сказал он. сказал сотрудник. Это был причудливый разговор, который сумел стереть часть скептицизма, который у меня был, когда я впервые увидел демо-версию проекта Google Project Astra.



Тем не менее, более чем что-либо другое, презентация, которую я увидел, еще раз подтвердила, что до всезнающего и всеполезного ИИ-помощника осталось еще много лет. Разговаривая с двумя сотрудниками Google, которые проводили демонстрацию, я узнал о способности Astra "запоминать" в настоящее время ограничено одним сеансом, и то всего несколькими минутами. Кроме того, помощник зависит от помощи облака, а не может работать исключительно на устройстве. Я уверен, что Google в конечном итоге преодолеет эти ограничения, но я не ожидаю, что эти прорывы будут легкими или быстрыми. п>

Post Views: 61