LALAL.AI — убираем вокал из музыки при помощи нейросети

LALAL.AI — это онлайн‑сер­вис по раз­делению дорожек любого ауди­офор­мата на вокал и музыку. С таким AI мож­но дать волю фан­тазии: кара­оке, ремик­сы, саунд­тре­ки из филь­мов — вырезать вокал из них мож­но в один клик, а про­цесс занима­ет нес­коль­ко минут. 

КАК РАБОТАЕТ НЕЙРОСЕТЬ LALAL.AI?

Мо­жет показать­ся, что раз­деление дорож­ки — это про­цесс нес­ложный, но это не так. Что­бы дос­тичь качес­твен­ного раз­деления, в ход идут мно­гооб­разные модели, про­цес­сы и базы дан­ных.

Лю­бой трек сос­тоит из нес­коль­ких дорожек: вокала, удар­ных, баса, дру­гих инс­тру­мен­тов. Пос­ле све­дения их в еди­ную ком­позицию раз­делить их обратно уже не так прос­то. Что­бы отде­лить вокал, ней­росеть LALAL.AI ана­лизи­рует трек и пыта­ется извлечь из него информа­цию об отдель­ных инс­тру­мен­тах и пар­тиях.

Ба­за дан­ных LALAL.AI нас­читыва­ет целых 20 Тбайт сту­дий­ных зву­коза­писей высоко­го качес­тва, которые исполь­зуют­ся для тре­ниров­ки искусс­твен­ного интеллек­та. Это поз­воля­ет сер­вису справ­лять­ся с работой, делая минимум оши­бок.

Мил­лионы парамет­ров и передо­вая циф­ровая обра­бот­ка сиг­налов обес­печива­ют качес­твен­ную и быс­трую работу, а про­цесс при этом оста­ется прос­тым и удоб­ным для поль­зовате­ля.

КАК ПОЛЬЗОВАТЬСЯ?

Шаг 1. Выбираем фильтр

Бла­года­ря гиб­кой сис­теме филь­тров мож­но регули­ровать интенсив­ность обра­бот­ки, что поз­воля­ет «най­ти под­ход» к каж­дому тре­ку. В сис­теме есть три филь­тра:

  • Mild (уме­рен­ный) — минималь­ный уро­вень обра­бот­ки, при которой в выход­ных тре­ках может про­являть­ся ори­гиналь­ная дорож­ка.
  • Normal (стан­дар­тный) — уро­вень обра­бот­ки по умол­чанию, с уме­рен­ной филь­тра­цией. Боль­шинс­тво оши­бок исправ­ляет­ся, но в выход­ных дорож­ках могут при­сутс­тво­вать искусс­твен­ные эле­мен­ты и высоко­час­тотное раз­мытие.
  • Aggressive (интенсив­ный) — мак­сималь­ный уро­вень обра­бот­ки. Алго­рит­мы филь­тра­ции наибо­лее чувс­тви­тель­но реаги­руют на воз­можные ошиб­ки. Это может при­вес­ти к тому, что осо­бен­ности некото­рых тре­ков будут вос­при­нимать­ся как ошиб­ки и уда­лять­ся.

По­играть с филь­тра­ми мож­но под кноп­кой Select file.

Шаг 2. Выбираем сетку

LALAL.AI пре­дос­тавля­ет нам две ней­росети на выбор: Cassiopeia и ее пред­шес­твен­ницу Rocknet.

Сог­ласно тес­там, Cassiopeia отста­ет от Rocknet по фор­маль­ным мет­рикам, но инс­тру­мен­таль­ная часть, и осо­бен­но вокаль­ная дорож­ка, зву­чат гораз­до естес­твен­нее и мяг­че, чем у Rocknet.

В любом слу­чае для каж­дого тре­ка най­дет­ся своя сет­ка — резуль­тат зависит от фор­мата дорож­ки и жан­ра.

Для сме­ны сет­ки на пре­дыду­щую (Rocknet) нуж­но сдви­нуть пол­зунок.

Шаг 3. Загружаем трек

Вы­бира­ем ауди­офайл любого жан­ра и заг­ружа­ем его на LALAL.AI. Сер­вис под­держи­вает прак­тичес­ки все ауди­офор­маты, вклю­чая Opus, FLAC, WebM, WEBA, WAV, Ogg, M4A, OGA, MP3, AIFF, WMA, AU, MP2, Ogg, AAC, AC3, DTS.

По­мимо ауди­офай­лов, LALAL.AI так­же под­держи­вает обра­бот­ку видео: теперь не нуж­но ломать голову над тем, как не потерять качес­тво при кон­верта­ции.

Шаг 4. Получаем готовые дорожки

Те­перь оста­ется подож­дать нес­коль­ко минут, пока ИИ сде­лает всю работу за нас. Пос­ле обра­бот­ки готовые дорож­ки мож­но прос­лушать онлайн или ска­чать, а если нет вре­мени ждать, то мож­но бежать по делам: ссыл­ки на ска­чива­ние так­же отправ­ляют­ся на поч­ту.

По умол­чанию обра­баты­вает­ся толь­ко часть фай­ла, что­бы поль­зователь мог про­тес­тировать сер­вис перед покуп­кой. Если резуль­тат нас устра­ивает, то мож­но обра­ботать целый трек, а не его часть.

СТОИМОСТЬ СЕРВИСА

LALAL.AI пред­лага­ет три тариф­ных пакета, в каж­дый из которых вхо­дит опре­делен­ное количес­тво тре­ков и минут:

  • Бес­плат­ный: 3 фай­ла / 10 минут
  • Lite: 10 фай­лов / 90 минут
  • Professional: 30 фай­лов / 500 минут

Удоб­ная сис­тема опла­ты есть и для поль­зовате­лей, чей объ­ем дан­ных пре­выша­ет воз­можнос­ти пакета Professional.

Что­бы обра­ботать целый трек и при этом сэконо­мить, мож­но получить бес­плат­ный пакет минут. Нуж­но толь­ко зарегис­три­ровать­ся на сай­те через email. Пос­ле регис­тра­ции минуты с акка­унта мож­но исполь­зовать в любое вре­мя с любого девай­са для обра­бот­ки целых тре­ков, а так­же докупить минуты.

Музыку и вокал искусственный интеллект научился клонировать давно. Теперь он научился и удалять голос из записи.

По материалам Хакер.

Добавить комментарий

Ваш адрес email не будет опубликован.