Sber Salute Speech

Об инструменте

Sber Salute Speech даёт агенту распознавание и синтез речи от Сбера. С ним агент понимает голосовые сообщения, аудиозаписи и звуковую дорожку видеофайлов: получает текстовую расшифровку и дальше работает с ней как с обычным сообщением. Синтез речи превращает текст ответа в аудио.

Действия

Действие

Что делает

Распознавание речи (Speech To Text)

Преобразует аудио, голосовые сообщения и звуковую дорожку видео в текст

В контекст агента попадает только расшифровка — сам аудио- или видеофайл модель не видит.

Подключение

Авторизация не нужна: подключите инструмент агенту в разделе Инструменты, как это сделать — в разделе Как добавить инструменты в агента. К шаблонам Маркетплейса, где инструмент предусмотрен, он подключается автоматически. Чтобы пользователи могли прикреплять записи, у агента должна быть включена настройка Загрузка файлов — без неё тип «Аудио» и «Видео» в чате не предлагается.

Что приложить

  • Аудио: mp3, wav, ogg, opus, flac, m4a, aac — до 150 МБ на файл. Голосовые сообщения из Telegram и MAX обрабатываются как обычные аудиофайлы.

  • Видео: mp4, mov, mkv, webm, avi — до 200 МБ на файл. Платформа извлекает звуковую дорожку сразу при загрузке и отправляет на распознавание только её; видеоряд не обрабатывается. Видеосообщения-кружки Telegram принимаются так же.

  • До 20 файлов за одну загрузку.

  • По ссылке, в виджете и через API аудиофайл можно не прикладывать, а дать на него прямую http(s)-ссылку. Видео принимается только скрепкой.

Лимит 200 МБ покрывает часовую запись в сжатом виде — например, облачную запись созвона в 480–720p. Исходники с камеры и записи 1080p не проходят.

Ограничения мессенджеров

В Telegram и MAX действует лимит самого мессенджера, и итоговый предел — меньший из двух: лимита инструмента и лимита канала.

Канал

Аудио

Видео

Ссылка, виджет, API

150 МБ

200 МБ

MAX

150 МБ; запись не длиннее 60 минут — ограничение мессенджера

200 МБ; формат avi MAX не поддерживает — такой файл он отклонит сам

Telegram

20 МБ

20 МБ

Один и тот же агент в двух мессенджерах имеет разный предельный размер файла — часовая запись, которая пройдёт в MAX, в Telegram не пройдёт. Если файл укладывается в лимит инструмента, но превышает лимит канала, вы увидите ошибку.

Ограничения

  • Из видео используется только звук: мимику, жесты, слайды и демонстрацию экрана агент не анализирует.

  • Разметка реплик по говорящим не выполняется.

Если что-то пошло не так

Что увидите

Что делать

«Размер файла превышает 150 МБ»/ «…200 МБ»

Замените аудио- или видеофайл на меньший

«Формат файла не поддерживается»

Проверьте расширение — см. список форматов выше

«В файле нет звуковой дорожки. Загрузите запись со звуком»

В видео нет аудио — распознавать нечего

«Не удалось прочитать видеофайл. Повторите попытку или замените файл»

Файл повреждён или докачан не полностью

«Не удалось обработать запись. Попробуйте ещё раз или загрузите файл меньшего размера»

Извлечение звука не уложилось в отведённое время; кредиты не списаны

«Запись слишком длинная для распознавания»

Извлечённая дорожка больше 150 МБ — разделите запись; кредиты не списаны