Голосовые ассистентыРечь в текст
SeamlessM4T / Seamless
Перевод речи и текста примерно между сотней языков, включая русский: речь в текст, речь в речь, потоковый перевод с сохранением интонации.
- Разработчик
- Meta, США
- Первый выпуск
- авг 2023
- Последний выпуск
- ноя 2023
- Размеры
- 281M – 2.3B
- Лицензия
- Только некоммерческоеCC BY-NC 4.0 — только некоммерческое использование
Какие задачи решает
- Перевод речи в речь
- Перевод и расшифровка записей
- Потоковый перевод
Где применяется
ИсследованияОбразованиеНекоммерческие проекты
Требования к железу
НоутбукНоутбук или обычный ПК, до 8 ГБ видеопамяти — младшие версии
подходит1 видеокартаОдна видеокарта на 16–80 ГБ — средние версии
подходитКластерСервер с несколькими видеокартами — флагманские версии
нет версийВерсии
- SeamlessM4T v2, Seamless Expressive и Streaming
- SeamlessM4T (medium, large)
Как внедряю у заказчика
- ПодборВыбираю размер модели под задачу и ваше железо, проверяю на ваших примерах.
- УстановкаРазворачиваю на вашем сервере или в закрытом контуре, отдаю API.
- ДообучениеДообучаю на ваших данных (LoRA) или подключаю базу знаний — что дешевле для задачи.
- ВстраиваниеПодключаю к CRM, 1С, боту, сайту или рабочему чату, настраиваю мониторинг.
Похожие модели
Голосовые ассистентыMoshi / HibikiKyutai · ФранцияКоммерция с условиями
Голосовой ассистент, который слушает и говорит одновременно, без задержки на распознавание и синтез. Hibiki — синхронный перевод речи в речь между несколькими европейскими языками.
ПодробнееРечь в текстWhisperOpenAI · СШАМожно в коммерциюРаспознавание речи на 99 языках, включая русский. Стандарт де-факто для расшифровки звонков и встреч.
ПодробнееРечь в текстOmnilingual ASRMeta · СШАМожно в коммерциюРаспознавание речи на 1600+ языках, включая русский и редкие языки, которые раньше не поддерживала ни одна система. Новый язык можно добавить по нескольким примерам.
Подробнее