Эфир 18.11 · Поток 318 ноября в 19:00 МСК — бесплатный практический эфир по ИИ-агентам · Живой Поток 3 стартует 23.11Эфир 18 ноября →Поток 3 (23.11)
РелизРазбор · На радарElevenLabs Blog→ оригинал

ElevenLabs открыла ElevenMusic бесплатно для людей без голоса: в программе 11 000+ человек

ElevenLabs расширила программу 1 Million Voices: раньше она возвращала людям речь, теперь добавила пение. Бесплатный доступ к ElevenMusic получат люди с необратимой потерей голоса — музыкант Грег Келлнер воссоздал свой по старым записям, а рэпер Абди Омар с нуля собрал голос в Voice Designer. Партнёрами стали NYU Langone Health и Wounded Warrior Project.

AI-обработка оригинала ElevenLabs Blog; редакция Hamidun News
ElevenLabs открыла ElevenMusic бесплатно для людей без голоса: в программе 11 000+ человек
Источник: ElevenLabs Blog. Коллаж: Hamidun News.
Слушать статью
Паспорт материала и цифры
ПараметрДанные
ПервоисточникElevenLabs Blog ↗
Главный редактор
Ключевой факт #1Доступ бесплатный, право на него проверяет ассоциация SONA
Ключевой факт #2Программа уже вернула голос более чем 11 000 людей
Ключевой факт #3Обязательство ElevenLabs — $1 млрд в натуральной форме

Грег Келлнер всю жизнь учил людей музыке: играл на гитаре, пел, общался жестами. В 2019 году рак мозга забрал у него певческий голос, и преподавание пришлось поставить на паузу. Спустя семь лет он попал в программу ElevenLabs Impact и теперь снова поёт. Модель ElevenMusic воссоздала его голос по старым записям. 11 ноября на нью-йоркском Summit он вышел на сцену и исполнил новые песни этим голосом.

История красивая, но интересна она не только эмоциями. За ней стоит продуктовый ход: ElevenLabs превращает клонирование голоса из платной функции в инструмент доступности и делает это системно.

Два голоса: из архива и с нуля

В анонсе показаны два сценария, и они технически разные.

Первый — восстановление. У человека остались записи прежнего голоса, и по ним строится цифровая копия. Так было у Келлнера: материал из прошлого превратился в голос, на котором можно писать и выпускать новые песни.

Второй — проектирование. Абди Омар из-за детского церебрального паралича никогда не говорил. Брать для клонирования было нечего, и он собрал голос с нуля в Voice Designer. Теперь Омар рэпер: ElevenMusic помогает ему писать и продюсировать треки. Это сильный аргумент в пользу генерации голоса по описанию, которую обычно считают игрушкой для озвучки роликов.

Как это устроено как программа

До сих пор 1 Million Voices занималась речью. По данным компании, она помогла больше чем 11 000 людей с БАС, болезнью двигательных нейронов, раком головы и шеи и другими диагнозами снова говорить голосом, похожим на их собственный. Доступ пожизненный и бесплатный. Цель громкая: вернуть голос миллиону человек. Это обязательство на $1 млрд в натуральной форме, то есть оценка своих продуктов и услуг, а не деньги.

Теперь к речи добавилось пение. ElevenMusic бесплатно получат люди с необратимой потерей голоса. Запуск идёт вместе с Songwriters of North America (SONA): ассоциация проверяет, кто имеет право на доступ, и раздаёт его участникам и широкому сообществу авторов. Позже обещают добавить других партнёров.

Два новых партнёра закрывают другие каналы:

  • NYU Langone Health. Программа доступна через Rusk Rehabilitation пациентам с БАС, раком головы и шеи, после инсульта и с другими состояниями. Подать заявку можно через свою реабилитационную команду.
  • Wounded Warrior Project. Организация ветеранов проведёт с ElevenLabs обучающий семинар о том, как голосовой ИИ помогает при потере голоса, слепоте и слабом зрении. Дальше стороны изучат, как связывать ветеранов и семьи с сервисами через голосовые технологии.

Заметьте схему: компания не строит собственную клиническую инфраструктуру. Она подключается к тем, кто уже общается с пациентами: больницам, НКО, ассоциациям. Они же берут на себя верификацию, то есть самую неудобную часть.

Что здесь стоит учесть

Это официальный анонс, и он почти не содержит измеримых данных. Нет сведений о том, сколько записей нужно для восстановления, как сильно модель отличается от настоящего голоса, сколько людей получили доступ именно к музыке. Цифра 11 000 относится к речи, а не к пению. «Миллиард в натуральной форме» — внутренняя оценка самой компании. И с WWP пока заявлено только исследование возможностей, а не готовый продукт.

Остаётся и общий вопрос: голос — биометрия, поэтому клонирование должно опираться на согласие человека. В анонсе об этом не сказано ни слова. Раздачу доступа через клиники и профессиональные ассоциации можно прочитать как способ избежать злоупотреблений, но это наша интерпретация, не заявление компании.

Практический вывод

Продактам и основателям из истории стоит вынести три вещи.

Первое: сочетание «восстановить по архиву» и «создать с нуля» закрывает почти всех пользователей. У кого-то есть записи, у кого-то их нет, и в продукте нужны оба пути.

Второе: каналы доставки решают всё. Клиника, ассоциация авторов и организация ветеранов уже имеют доверие и умеют проверять право на доступ, а стартапу самому такое доверие создавать годами.

Третье: доступность и бизнес не конфликтуют. Бесплатный вход для узкой группы работает как демонстрация возможностей модели лучше любого рекламного ролика. Если вы строите голосовой продукт, подумайте, какие сообщества с постоянной потерей голоса или речи могут стать вашими первыми партнёрами.

Сюжет

Вопросы и ответы по материалу

Что известно по теме: два голоса: из архива и с нуля?

В анонсе показаны два сценария, и они технически разные. Первый — восстановление. У человека остались записи прежнего голоса, и по ним строится цифровая копия. Так было у Келлнера: материал из прошлого превратился в голос, на котором можно писать и выпускать новые песни. Второй — проектирование. Абди Омар из-за детского церебрального паралича никогда не говорил. Брать для клонирования было нечего, и он собрал голос с нуля в Voice Designer. Теперь Омар рэпер: ElevenMusic помогает ему писать и продюсировать треки.

Что известно по теме: как это устроено как программа?

До сих пор 1 Million Voices занималась речью. По данным компании, она помогла больше чем 11 000 людей с БАС, болезнью двигательных нейронов, раком головы и шеи и другими диагнозами снова говорить голосом, похожим на их собственный. Доступ пожизненный и бесплатный. Цель громкая: вернуть голос миллиону человек. Это обязательство на $1 млрд в натуральной форме, то есть оценка своих продуктов и услуг, а не деньги. Теперь к речи добавилось пение. ElevenMusic бесплатно получат люди с необратимой потерей голоса.

Что известно по теме: что здесь стоит учесть?

Это официальный анонс, и он почти не содержит измеримых данных. Нет сведений о том, сколько записей нужно для восстановления, как сильно модель отличается от настоящего голоса, сколько людей получили доступ именно к музыке. Цифра 11 000 относится к речи, а не к пению. «Миллиард в натуральной форме» — внутренняя оценка самой компании. И с WWP пока заявлено только исследование возможностей, а не готовый продукт. Остаётся и общий вопрос: голос — биометрия, поэтому клонирование должно опираться на согласие человека.

ЖХ
Жемал Хамидун — CPO Alpina Digital, продакт-менеджер AlpinaGPT. Делает AI-продукты с 2019 года. Hamidun News — pet project, который вырос в production-агрегатор с 6000+ читателей.
✦ Закрытый клуб практиков · Vibe Club

Внедряйте ИИ быстрее рынка вместе с инженерами и фаундерами

Внутри Vibe Club (hamidun.com/club): еженедельные живые мастермайнды и разборы архитектуры с Жемалом Хамидуном, закрытый Tech Radar, LMS и обновляемая база из 370+ боевых скиллов.

Вступить в Vibe Club →Тест-драйв Академии (72ч)
Что вы думаете?
Загружаем комментарии…