Inworld AI
Платформа голосового ИИ реального времени: синтез речи, распознавание речи, API «речь в речь» и маршрутизация LLM.
Inworld AI — исследовательская лаборатория и поставщик инференса, предоставляющий голосовой ИИ реального времени через API. Разработчики используют Inworld AI, чтобы добавлять в потребительские приложения синтез речи, распознавание речи и разговор «речь в речь», а также чтобы направлять запросы чата к множеству языковых моделей через одну конечную точку. Доступ осуществляется по ключу API, тарифы включают ежемесячные кредиты на использование.
Подходит для Командам разработки, которые создают голосовых агентов, виртуальных компаньонов, игры или обучающие приложения и которым нужны речевые модели с низкой задержкой и маршрутизация моделей от одного поставщика.
- Платформы
- API, Web
- Модель оплаты
- Кредиты
- Бесплатный тариф
- Да
- API
- Да
- Разработчик
- Inworld AI
- Добавлен
Последняя проверка: . Источник информации: inworld.ai.
Что такое Inworld AI?
Inworld AI — поставщик моделей ИИ реального времени и инференса для потребительских приложений. Собственные модели синтеза речи, Realtime TTS-2 и TTS-2 Flash, принимают внутри текста указания в скобках, меняющие тон, темп, громкость и паузы, и охватывают более 200 языков. Голоса можно клонировать по 15 секундам аудио или создавать по письменному описанию. Realtime API передаёт входящую и исходящую речь по одному соединению WebSocket или WebRTC с определением смены реплик и вызовом функций, а сервис распознавания речи добавляет потоковую расшифровку, сигналы профиля голоса, диаризацию и временные метки слов. Realtime Router направляет запросы к LLM на модели OpenAI, Anthropic, Google и других по ценам поставщиков. Компания указывает среди соответствий SOC 2 Type II, HIPAA и GDPR и сообщает, что приобрела Ultravox.
Ключевые возможности
Синтез речи в реальном времени
Синтезирует речь; заявленное время до первого байта — менее 100 мс для TTS-2 и 25 мс для варианта Flash.
Указания по озвучиванию в тексте
Читает указания в скобках, помещённые в сценарий, и соответственно меняет тон, скорость, громкость, стиль и паузы.
Клонирование и создание голоса
Создаёт собственный голос по образцу в 15 секунд или по текстовому описанию акцента, возраста, тона и энергичности.
API «речь в речь»
Передаёт полнодуплексный звук по одному соединению WebSocket или WebRTC с настраиваемой сменой реплик и вызовом инструментов во время сессии.
Распознавание речи с профилированием
Расшифровывает живое или записанное аудио и для каждого фрагмента возвращает сигналы об эмоциях, возрасте, акценте, высоте голоса и стиле.
Маршрутизатор LLM
Направляет запросы на завершение чата к более чем 100 моделям с резервным переключением и A/B-тестированием, без наценки к ценам поставщиков.
Скриншоты
Сценарии использования
- Голосовые агенты
- Постройте агента поддержки или записи, который отвечает звонящим почти без заметной задержки.
- ИИ-компаньоны
- Дайте персонажу-компаньону последовательный выразительный голос на протяжении долгих разговоров.
- Персонажи игр
- Позвольте игрокам разговаривать с неигровыми персонажами, которые отвечают озвученными репликами.
- Приложения для изучения языков
- Создавайте материал для устной практики на многих языках одним клонированным или созданным голосом.
- Контроль затрат на модели
- Направляйте каждый запрос к более дешёвой или быстрой языковой модели в зависимости от тарифа или локали пользователя.
Что важно знать
- Тарифы на основе кредитов
- Платные уровни включают ежемесячный объём кредитов, которые можно тратить на речевые и языковые модели; на более высоких уровнях цены за единицу ниже.
- Соответствие требованиям зависит от уровня
- Нулевое хранение данных, HIPAA и BAA указаны как дополнения начиная с уровня Growth, а варианты размещения данных в регионе — в разделе Enterprise.
- Фокус сместился на голосовую инфраструктуру
- Нынешний сайт представляет Inworld как поставщика речевых моделей и инференса и сообщает о приобретении Ultravox для работы с «речью в речь».
Вопросы и ответы
Что такое Inworld AI?
Inworld AI — исследовательская лаборатория и поставщик инференса, предлагающий через API синтез речи, распознавание речи, «речь в речь» и маршрутизацию LLM в реальном времени.
Для чего используют Inworld AI?
Inworld AI используют, чтобы встраивать голосовые функции в потребительские приложения, например компаньонов, игры, обучающие инструменты, приложения для здоровья и агентов для работы с клиентами.
Есть ли у Inworld AI API?
Да. Inworld AI предоставляется через модульные API с открытой документацией, справочником по API и песочницей.
Inworld AI бесплатный?
У Inworld AI есть уровень On-Demand, с которым можно начать бесплатно и который включает ограниченный объём синтеза речи; использование сверх этого и более высокие уровни платные. Актуальные цены смотрите на официальной странице с ценами.
Сколько языков поддерживает Inworld AI?
Inworld AI сообщает, что его синтез речи охватывает более 200 языков и что один клонированный голос может говорить на всех.
Может ли Inworld AI клонировать голос?
Да. Inworld AI заявляет, что собственный голос можно создать по 15 секундам аудио, а голоса можно также создавать по текстовому описанию.
На какие языковые модели Inworld AI может направлять запросы?
Маршрутизатор Inworld AI через один API выходит на модели OpenAI, Anthropic и Google и более 100 других.
Кому подойдёт
- Разработчики
- Создатели голосовых агентов
- Игровые студии
- Команды приложений-компаньонов
- Образовательные платформы
Используется в руководствах
- Создание приложения на основе ИИ: набор инструментов, слой за слоемЭтап 7: Голосовые, графические и видеофункции
Каждое руководство разбивает одну задачу на этапы и показывает инструменты для каждого из них. Все руководства
Комментарии
Комментариев пока нет. Если вы пользовались Inworld AI, расскажите другим читателям, как всё прошло.
Аналоги Inworld AI
| Инструмент | Бесплатный тариф | Начальная цена | API |
|---|---|---|---|
 Fish AudioГолосовая ИИ-платформа для синтеза речи и клонирования голоса: теги эмоций, большая библиотека голосов и API для разработчиков. |
Да | — | Да |
 LazybirdИИ-генератор озвучки: превращает тексты в скачиваемую речь, предлагает 200+ голосов, клонирование голоса и API. |
Да | — | Да |
 ListnrИИ-генератор голоса для синтеза речи, клонирования голоса и озвучки в студии в браузере. |
Да | — | Да |
 TypecastИИ-генератор голоса с эмоциональной озвучкой текста, клонированием голоса, мобильным приложением и API для разработчиков. |
Да | — | Да |
 Voice.aiИИ-платформа для работы с голосом: изменение голоса в реальном времени, клонирование, синтез речи и голосовые агенты для телефонных звонков. |
Да | — | Да |
Из тех же категорий, что и Inworld AI. Начальная цена указана, только если мы проверили её на странице цен разработчика; прочерк означает, что цена не проверена или не опубликована. Все инструменты в категории «Озвучка текста»