"8 новых продуктов и обновлений ИИ протестированы"

# ai

В I/O мы не просто разрабатываем список обновлений, таких как новые модели Близнецов, агенты ИИ и настройки Android,-мы на самом деле позволяем разработчикам, репортерам и партнерам вступить в действие с практическими демонстрациями продукта. В этом году я должен был провести день в Амфитеатре Shoreline, где происходит ввод -вывод, и я должен был проверить кучу этих демонстраций. Вот недостаток в некоторых из них. Моя первая демонстрация дня была довольно крутой. Я наблюдал, как Близнецы Advanced занялись договором аренды недвижимости на 20 с лишним, полным юридического жаргона и хитрых положений. После того, как он обработал документ, я мог бы задать вопросы об этом, например, позволил бы моему арендодателю иметь домашнюю собаку или есть какие -либо дополнительные сборы, которые я должен заплатить. Я уже с нетерпением жду возможности использовать эту функцию, чтобы разобраться в моей следующей аренде, когда моя квартира займет обновление. Далее, демонстрация стала еще более впечатляющей. Два гуглера питали Близнецов в формате PDF массового учебника по экономике - сотни страниц длиной. Мне потребовалось бы возраст, чтобы прочитать его, но Близнецы подняли резюме и указали на ключевые темы, которые можно учиться в кратчайшие сроки. Он даже объединил викторину с несколькими вариантами ответов, в комплекте с одним правильным ответом и тремя хитрыми неправильными, чтобы помочь мне подготовиться к гипотетическому экзамену. Гуглеры Сид Лалл (слева) и Адам Курцрок (справа) демонстрируют, как Gemini Advanced теперь может суммировать здоровенный экономический учебник или тысячи страниц документов. Обе эти демонстрации использовали Gemini 1.5 Pro, что мы представили ранее в этом году с самым длинным контекстным окном любой крупномасштабной модели фундамента. Сейчас мы выпускаем ранний доступ к Gemini 1.5 Pro для Advanced Addance Addance Advance Gemini, позволяя им загружать документы непосредственно с диска. Это означает, что они могут использовать Близнецы для суммирования или анализа документов длиной до 1500 страниц. Gemini 1.5 Pro также попадает в боковую панель приложений рабочей области, таких как Gmail, Docs, листы, слайды и драйв. Я увидел это в действии, используя Gemini в Gmail, чтобы обобщить образец еженедельного электронного письма в школе, и это выявило конкретные детали, такие как занятия для учащихся 7-го класса и упаковочный список для ночной поездки. Боковая панель Gemini может помочь вам ответить на ключевые вопросы о вашем контенте в Gmail, Drive и многое другое. Улучшенное длинное окно контекста может даже извлечь информацию из нескольких документов при ответе на одну подсказку. В DOCS я попросил помощи в написании образец письма потенциальному кандидату на работу, связывающего с документом описания работы и портфелем PDF -кандидата. Близнецы мгновенно составили электронное письмо, в котором учитывались данные из обоих документов. Но Gemini 1.5 Pro не единственный новый ребенок в блоке. Я также должен был поиграть с недавно анонсированным Imagen 3, нашей лучшей моделью текста к изображению. Одной из классных функций, которую я попробовал, была его способность генерировать декоративный текст и буквы. Я попросил стилизованный алфавит, как буквы, сделанные из джема на тосте или серебряных воздушных шаров, плавающих в небе. Imagen 3 выпустил полный алфавит букв, который я тогда мог бы использовать для создания собственных (вкусных) меню. После моего веселья с Imagen 3 я вернулся к большему количеству демонстраций Близнецов. Одна демонстрация позволила мне поднять наложение Близнецов на телефон Android и задать вопросы о чем угодно на экране. Это показало, что мы не просто расширяем то, что вы можете спросить, Близнецы, но и сделать его контекстом, чтобы предвидеть ваши потребности и предлагать полезные предложения. В качестве примера демонстрация использовала длинное руководство по духовке. Вместо того, чтобы проходить через документ, я сразу же поднял Близнецы и сразу же получил предложение «Спросите этот PDF». Я задавал такие вопросы, как «Как мне обновить часы», и получил быстрые, точные ответы. Это работало так же хорошо с видео на YouTube. Вместо того, чтобы смотреть 20-минутное видео тренировок, я спросил, как изменить доски, и получил ответ в Snap, а затем перешел к следующей демонстрации. Следующая демонстрация представила новый режим разговора под названием Gemini Live, где вы можете поговорить с Gemini в приложении без печати. Разговор с Близнецами была другой атмосферой от обычного интерфейса чат -бота. Его ответы были более разговорными, а не только абзацы текстовых или пулевых списков. В своей демонстрации я попросил список детских мероприятий для летних каникул и смог прервать список, чтобы узнать больше о том, какие материалы мне понадобятся для уживания рубашки. Демонстрация Project Astra подняла вещи на следующий уровень, показывая, куда возглавляются наши разговорные проекты искусственного интеллекта. Наша песочница ИИ, где разработчики и участники опробовали такие демонстрации, как Project Astra и другие творческие эксперименты по ИИ, такие как DJ -режим MusicFX. Вместо того, чтобы просто работать с тем, что находится на вашем экране, или что вы вводили в чат, мультимодальные возможности Astra могут одновременно понимать разговорные речевые подсказки и живые видео -каналы, разблокируя новые виды опыта искусственного интеллекта. Аллитерационная демонстрация Astra начала просто: я показал камере объект, как банан или кусок хлеба, и Близнецы придумали аллитеративное предложение. Когда я добавил больше объектов, Близнецы продолжали разговор, от «ярких бананов, красиво греся на доске» с одним фруктом до «кулинарные творения могут привлечь внимание», когда представлена ​​целая доска буфета. Астра аллитератирует бананами, багэтами ... и все остальное, что вы можете показать это. Еще одна демонстрация Astra позволила мне сыграть в Pictionary с Близнецами. Это может звучать просто, но это требовало от агента понимать изображения, помнить, что было нарисовано каждый раунд, и использовать общие знания, чтобы угадать, что я нарисул. В одной демонстрации Астра знала, что круга недостаточно, чтобы основать предположение, но когда я добавил линии под ним, он быстро перешел от идентификации фигуры к палке к признанию того, что человек, держащий эмодзи черепа, был Гамлет. Astra непобедима в Pictionary. Переход через песочницу ИИ и другие демонстрационные станции казалось, как заглянуть в будущее. Это было также немного унизительно: Астра избила меня в Pictionary в нескольких раундах!

Связанная статья

Комментарии (35)