📱

Get Our Mobile App

Take your business learning on the go!

Download on the App StoreGet it on Google Play

Build INSTANT AI Voice Agents with Gemini 3.0 Pro

Brendan Jowett8:32

Transcription

Привет. >> Привет. Чем могу помочь вам сегодня? >> Привет, я хотел забронировать номер, на эти выходные. >> Конечно. Вы ищете номер на эти выходные. Итак, с пятницы по воскресенье. >> Это было бы здорово. Спасибо. >> Отлично. Просто чтобы подтвердить, это заезд в пятницу и выезд в воскресенье? >> Да, это было бы идеально. Эм, если бы мы могли заехать в пятницу утром, если возможно. Время заезда в нашем отеле обычно после 14:00. Если вы прибудете раньше, мы можем забрать ваш багаж, чтобы вы могли исследовать город, пока ждете. Хотите продолжить бронирование на эти даты? >> Теперь этот голосовой агент, который вы только что слышали, был мгновенно сгенерирован с использованием совершенно новой модели Gemini 3 Pro. Я смог сгенерировать весь голосовой агент и всю веб-страницу, используя всего один запрос. А на бэкенде используется мощная модель Gemini Live от Google. И сегодня я хочу показать вам, как вы можете сделать то же самое, вызвав голосовой агент и всю веб-страницу в существование. Так что это будет идеально, если вы хотите создать голосовой агент и развернуть его на веб-сайте. Вам больше ничего не понадобится, чтобы запустить его. Но это также будет отличная демонстрационная система, которую вы можете мгновенно сгенерировать для конкретной отрасли, а затем поделиться с клиентами. И если вы хотите превратить это в готовую к производству систему, вы можете просто попросить Gemini дать вам запрос из этого и затем загрузить его с помощью такого инструмента, как Vapio Retail. Итак, переходим к делу. Это Google AI Studio, и совершенно новое то, что мы теперь можем создавать приложения внутри Gemini здесь. Так что вы можете думать об этом как о «вайб-кодинге». Это очень похоже на Replet или Lovable. Это просто версия Google. Итак, на главной странице вы сразу увидите модель Gemini 3 Pro preview. Это модель, которую мы будем использовать для создания этого для нас. А затем, если мы посмотрим вниз, вы увидите «Усильте свои приложения с помощью ИИ». Вы увидите «Приложение на базе nano banana». Это для генерации изображений nano banana. «Создавайте разговорные голосовые приложения». Используя Gemini Live API, чтобы придать вашему приложению голос и создать собственный разговорный опыт. Это то, что мы будем использовать для создания голосового агента. Затем, конечно, еще пара других вариантов использования. Если мы хотим создать инструмент для генерации видео с V3, мы можем сделать это здесь. Но в конечном итоге все, что нам нужно сделать, это просто нажать «Создать разговорные голосовые агенты». И произойдет то, что он сообщит нашему запросу, что мы хотим создать здесь голосовое приложение. Мы хотим использовать Gemini Live API. И поскольку это полностью в экосистеме Google, это уже связано с моей учетной записью Google и биллингом, нам не нужно получать никаких дополнительных API-ключей или дополнительных API для настройки, у него будет доступ ко всему, что ему нужно, чтобы превратить это в полностью работающий голосовой агент с одним запросом. Очень просто, здесь нет ничего сложного. Я не делаю ничего особенного, чтобы запустить это. Я буквально просто скажу, что я хочу. Итак, я только что ввел свой запрос. Я хотел бы демонстрационный агент для администратора отеля. Это для австралийского отеля в Сиднее. Мы хотим женский австралийский голос. И одна из действительно замечательных вещей в Gemini 2 с половиной Live, если вы раньше использовали эту модель, заключается в том, что она действительно хорошо справляется с другими акцентами, разными диалектами, разными тонами, разными языками, она действительно хорошо справляется. И поэтому мы можем просто запросить голос или акцент, который мы ищем. И это действительно хорошо справляется с этим. Так что, сравнивая это с чем-то вроде 11 Labs, где нам нужно выбрать конкретный голос, который мы хотим использовать, и протестировать его, это значительно упрощает задачу. Так что все, что нам нужно сделать, это буквально просто нажать кнопку «Создать». Он начнет создавать его, и вы увидите IDE, появляющуюся прямо здесь. Итак, мы видим чат-агента слева, проходящего свой мыслительный процесс, и прямо здесь, в основной части экрана, мы увидим его мыслительный процесс, снова интегрирующий консьерж-сервисы. Все это относится к нашей фактической системе, которую он строит, но мы увидим фактическое приложение и веб-страницу, появляющиеся прямо здесь. Итак, вот оно. Система Gemini завершила свою сборку, и вот что мы получили. Так что вы можете видеть здесь «Разрешить этому приложению запрашивать доступ к микрофону». Это потому, что мы хотим иметь возможность говорить с ним, очевидно. Просто нажмите кнопку «Разрешить». Это должно появиться в вашей системе. А затем мы увидим здесь приложение, которое я только что создал. Это выглядит уже довольно потрясающе. На самом деле на фоне есть изображение Сиднея. Так что эта модель может ссылаться на изображения. Не уверен, откуда она это взяла. Я не думаю, что это изображение, сгенерированное ИИ. Это может быть. Вероятно, просто взято из поиска Google. Мы видим здесь, что написано «живое аудио». Оно назвало себя Сарой, что круто. И мы можем нажать кнопку «Позвонить на ресепшн». Давайте попробуем и посмотрим, работает ли это. Итак, наш первый запуск на самом деле не сработал. Мы видим внизу: «Ошибка: запрос содержит недопустимый аргумент». Я уже пробовал это раньше, и это сработало сразу. Так что я не уверен, что произошло на этот раз, но довольно круто с этим. Очевидно, оно появилось и видит произошедшую ошибку. Просто нажмите кнопку «Автоисправление». Эм, и оно должно исправить эту проблему самостоятельно. Хорошо. Итак, оно говорит, что исправило эту проблему. Надеюсь, так оно и есть. Я попробую позвонить снова. Привет. >> Привет. Чем могу помочь вам сегодня? >> Привет, я хотел забронировать номер, на эти выходные. >> Конечно. Вы ищете номер на эти выходные. Итак, с пятницы по воскресенье. >> Это было бы здорово. Спасибо. >> Отлично. Просто чтобы подтвердить, это заезд в пятницу и выезд в воскресенье? >> Да, это было бы идеально. Эм, если бы мы могли заехать в пятницу утром, если возможно. >> Время заезда в нашем отеле обычно после 14:00. Если вы прибудете раньше, мы можем забрать ваш багаж, чтобы вы могли исследовать город, пока ждете. Хотите продолжить бронирование на эти даты? >> Это здорово. Спасибо. Да, только на эти выходные. Эм, а вы проводите какие-нибудь экскурсии? >> Мы не продаем туры напрямую, но у нас есть консьерж, который может помочь вам забронировать любое количество туров по Сиднею, например, в Сиднейский оперный театр или на пляж Бонди. Хотите, чтобы я соединил вас с ним? >> Это было бы потрясающе. Если бы вы могли просто сделать пометку, что это то, что нас интересует, когда мы приедем. Эм, это было бы потрясающе. >> Конечно. Я сделаю пометку, что вы заинтересованы в рекомендациях туров при регистрации. Могу ли я еще чем-нибудь помочь вам сегодня? >> Итак, вот оно. Это довольно эпично и звучит довольно реалистично. Вы едва ли отличите это от системы ИИ. Звучит невероятно реалистично. Эм, действительно никаких недостатков, которые я бы нашел. Это также очень низкая задержка, как вы видите. Теперь, стоит отметить, что на данный момент это будет система WebRTC, что означает, что я просто совершаю этот звонок через веб. Так что здесь нет всех задержек, которые могут возникнуть при телефонной связи. Но в целом, довольно эпично. Теперь, одна вещь, которую вы можете сделать, это сделать полноэкранный режим. >> Экран. Так что, если я нажму кнопку полноэкранного режима, вы увидите, как это выглядит как полноценная веб-страница. Вы, очевидно, можете развернуть это. Так что, если мы посмотрим в правом верхнем углу, вы увидите кнопку с ракетой, на которой просто написано «Развернуть приложение». Что мы делаем здесь, это просто развертываем это в Google Cloud. Так что, если вы раньше использовали сервисы Google, мы можем развернуть это как приложение Google Cloud. Вы подключаете свой биллинг там, а затем можете развернуть это по фактическому URL-адресу. В противном случае вы также можете сохранить это в GitHub и разместить как проект GitHub. Эм, множество способов, которыми вы можете разместить это. В противном случае вы можете просто скачать код. Теперь, очевидно, если вы собираетесь развертывать это через здесь, это будет просто веб-система голоса. Так что это может быть демонстрационный веб-сайт, который вы показываете клиентам. Так что, если у меня был запрос на конкретную систему консьержа отеля, что мы можем сделать, это просто быстро создать что-то вроде этого. Очевидно, это заняло у меня всего пару минут, чтобы запустить это, а затем я мог бы поделиться этим с клиентами, чтобы они посмотрели, эм, и просто помогли продемонстрировать, что эта система может делать. Но, очевидно, если вы хотите развернуть это в какой-либо телефонной системе, это не будет прямой способ сделать это. Но то, что я бы рекомендовал сделать, это просто перейти и спросить экземпляр Gemini прямо здесь и сказать ему, чтобы он просто дал нам запрос, который он использовал для генерации системы, которую он использует здесь. А затем мы можем перейти на платформу, такую как Retail, или на платформу, такую как Vappy, которые более ориентированы на фактическое размещение на телефонном номере. Теперь одна вещь, с которой я хочу предостеречь в отношении этих сгенерированных ИИ голосовых систем ИИ или других систем ИИ в целом, заключается в том, что надежность этих запросов, очевидно, не будет такой оптимизированной, как запрос, который вы создали сами. Так что, например, если вы создаете одну из этих систем для своего собственного бизнеса или вы создаете одну из этих систем для другого бизнеса, вы можете начать замечать после первых нескольких звонков, поступающих в систему, что она не ведет себя каждый раз одинаково, и что вам нужно оптимизировать свой запрос, чтобы гарантировать, что он будет максимально последовательным и надежным. Так что, используя такой инструмент, как Reliable, как вы видите на экране прямо здесь, который является инструментом, который я создал сам для нашего собственного агентства, но у меня есть публичный доступ для всех, кто может зарегистрироваться. Это просто платформа, где вы можете создать голосовой агент, подключить его сюда, и вы сможете запускать симуляции звонков против ваших запросов, что просто позволяет вам получить гораздо больше информации и данных из вашей системы и того, насколько хорошо она работает. Так что, если вы собираетесь создавать сгенерированную ИИ голосовую систему ИИ или другую систему ИИ, я определенно рекомендую проверить автоматизированную систему, такую как Reliable, чтобы убедиться, что эта система будет максимально надежной и последовательной. Если вы заинтересованы в изучении большего о голосовом ИИ или других системах ИИ в целом, вы хотите стать разработчиком или предпринимателем, продающим системы ИИ, обязательно ознакомьтесь с моим бесплатным сообществом школ, которое я оставлю в описании. У нас сейчас более 20 000 участников. У нас есть более 50 шаблонов и курсов по ИИ-агентам, все доступно бесплатно. У нас даже есть еженедельные звонки с ответами на вопросы со мной, так что вы можете задать мне любые вопросы, которые вы