Опять про AI: что-то пошло не по предсказаниям

[user811]

Я давно уже об этом в разных новостях мельком вижу.

Делайте некоторую поправку на то, что видите вы обычно не совсем дружественные тексты с большим процентом пропаганды. Я неоднократно бывал в Китае в режиме свободного путешествия. Как-то давно даже прожил 5 недель в китайской деревне. Внутри нормального китайца под формой правильного конфуцианца сидит раздолбайский даос. Китайцы обожают сводить на нет разные правила, срезать углы, придумывать лайфхаки. Чтобы это ощутить, достаточно иметь большой опыт покупки на Aliexpress. Посмотрите, как свободно ведут себя, например, китайские туристы (сравните с внешне похожими японцами). Не знаю как сейчас, но в последнюю свою поездку в Китае сим-карту я купил просто на улице, без паспорта, никак ее не регистрировал и спокойно звонил по ней неделю фактически анонимно. Вообще, выражение "Строгость законов смягчается необязательностью их исполнения" - оно к Китаю относится еще в большей степени.
И сильно под вопросом, какое общество сремительнее бежит к тоталитарному будущему: китайское, или современное западное с его нынешними" повестками и институтом "cancelation"

 

[Martin-rmm]

Делайте некоторую поправку на то, что видите вы обычно не совсем дружественные тексты с большим процентом пропаганды.

Рекомендую Вам читать комментируемые посты чуточку внимательнее.
Речь не шла о качестве текстов (но даже при этом я обозначил свою безоценочность в отношении их), а просто про их наличие. Понимаете разницу?

Такие статьи и ссылки на них - есть. И это просто факт.
Ваше понимание качества и процентов пропаганды это совсем другая тема.

 

[soundroad]

Потратил часок на поиски музыкальных ИИ платформ и прослушивание созданных ими музык.
Общее впечатление пока неоднозначное, т.к. нужно копать глубже. Есть ощущение, что в области электронной музыки у ИИ шансов гораздо больше, чем в живой. Но я бы не был слишком оптимистичен в том, что живая музыка ему совсем уж не по зубам.

Невольно вспомнились времена появления разных Ямах-самоиграек. Они безусловно вытеснили часть живых коллективов, но не заменили их. Примеры музыки на некоторых сайтах, пока что на уровне достаточно топорно сгенерированных и мидишно звучащих поделок. Некоторые сервисы предлагают возможность скачивания сгенеренных миди файлов. Думаю, что после "доработки напильником" в ДАВ, это может звучать вполне себе удобоваримо.

Возможно, за столь короткое время, я не смог найти то, что, на мой взгляд, смогло бы очень сильно оживить всю эту ИИ-шную музыку. Позже еще поищу...
Что я имею в виду под возможностью "оживления":
Пока, насколько я понял, все ИИ-композиторы базируются на миди-формате. Он весьма ограничен в том, что мы воспринимаем как "живость". Да, машины умеют строить композицию, структуру, придумывать гармонические последовательности... ведь во всем перечисленном, много математики. Дальше идет переселение математики в звук. И тут машина ограничена миди протоколом, который имеет всем нам известные границы.
Слушая примеры, я подумал о программе Band In A Box. Лет 20 назад я с ней сталкивался и там все было построено на миди. Причем разрабы весьма глубоко копнули в вопросы гармонизации мелодий и прочие полезные штуки. Так вот, несколько лет назад я наткнулся на рекламу этой проги и с удивлением для себя обнаружил то, что BIAB внедрили Real Tracks, т.е. живые треки, сыгранные живыми музыкантами. Программа может генерить на заданные аккорды сольные партии и аккомпанемент из живых треков с весьма неплохим результатом. Понятно, что это нарезка из заранее сыгранных фраз, но звучит это примерно на 100% реалистичнее, чем все ИИ-музыки, что я сегодня услышал. В общем, если кто-то пойдет по этому или схожему пути и ИИ в итоге будет оперировать не миди, а реальными живыми треками и научится их филигранно компоновать.., то возможно и нам, живым лабухам, придется поделиться с ним куском хлеба .

 

[Alexandr_Radio]

Невольно вспомнились времена появления разных Ямах-самоиграек

Я, лет десять назад, когда только начинал, купился на ромплер Nexus, найденный, "сами знаем где". Но, использовать готовенькое, хоть и настраиваемое, в плане фильтров и прочего, быстро надоело. Потом, заинтересовал Sytrus, стало интересно, что он может, если самому нарулить.
Так и эти, музыкальные нейросети, поиграются и популярность спадёт. Займут некую долю, допустим, как средство генерации быстрых примеров, для студентов-аранжировщиков и всё.
А моя необходимость в Nexus, отпала, когда появился FLEX в лицензионной FL Studio и Vital - мощный бесплатный Wavetable синтезатор.

 

[Константин Викторович]

Слушая примеры, я подумал о программе Band In A Box.

Ну вот примерно то и будет, если, скажем, зафорсить 20летню прогу с таким же рАспухом, как и то, что мы в этой теме обсуждаем, для обывателей будет ровно такой же эффект - "еб...ть как это невероятно") Но всё же... удалять прыщи автоматически, это всё же прогресс цивилизации, как ни крути)

 

[soundroad]

для обывателей будет ровно такой же эффект -

Судя по коментам на Ютюбе, для обывателей уже сейчас тот самый эффект .

Займут некую долю, допустим, как средство генерации быстрых примеров

Они уже сейчас вполне себе годны для генерации идей. Лично я не гнушаюсь использовать в своей работе все, что разрешено лицензией продавца софта или семплов. В том числе и всякие гитарные самоиграйки и семплы, хоть сам гитарист)). Современный процесс создания музыки именно этим и интересен.

 

[Lowcut]

удалять прыщи автоматически

Что не пост все про свои прыщи пишите.))
У вас на этом какой-то пунктик или психологическая травма?

 

[Martin-rmm]

Что не пост все про свои прыщи пишите.))
У вас на этом какой-то пунктик или психологическая травма?

Какая мощная аргументация. Научная.
Видеть прыщи там где их нет, это мало кому дано.

 

[PianoIst]

удаление вокала из песни

Кстати. А где такое есть? Я последние разы пробовал 7‑м Изотопом и фильтром в Audacios. Было примерно так же, как и 20 лет назад.

 

[StoneJungle]

@PianoIst, Izotope RX , модуль Music Rebalance
Или телеграм ботом. https://t.me/voice_remover_bot

 

[soundroad]

Кстати. А где такое есть?

Vocal Remover & Instrumental AI Splitter | LALAL.AI

Split vocal and instrumental tracks quickly and accurately with LALAL.AI. Upload any audio file and receive high-quality extracted tracks in a few seconds.

www.lalal.ai

Сегодня, когда рыскал по теме ИИ, наткнулся на этот сайт. Пишут, что они самые крутые в мире "стиратели вокала" .
Пример правда у них на сайте прям уж слишком странный. Отделили вокал от акустической гитары. Получилось хорошо.
Но как он себя поведет с полным фаршем в аранже... неизвестно.

 

[PianoIst]

@StoneJungle, опечатался же) Ннуу... Нет) обратный процесс (оставить только вокал) ещё более-менее. А вот чтобы вытащить вокал из минуса — уже надо переписывать минус. И, мне кажется, там не нейронка работает а хороший алгортим. Но могу и ошибаться.

Вот несколько примеров:

Кстати, говоря, интересно. Правда, из 4-х сайтов работает только 2. Но AIVA уже, да, делает ровно то, что ожидаешь от нейронки. Я так и не понял, что там с исполнением: то ли это миди играет, то ли она сама генерирует звук. Если сама генерирует — то вот это, конечно, круто. Можно все наши библы выкидывать и не греть этим голову)

Мне вот уже очень давно хочется, чтобы от традиционного сэмплирования перешли к музыкальному матчингу: чтобы библиотека выглядела как музыкальное произведение, из которого «умный сэмплер» выдёргивает нужные куски. Но пока никто в этом направлении не работал, кажется. А у меня тоже всё никак руки не дойдут... Лежат наброски, но там надо год пахать, чтобы более-менее внятный MVP собрать.

 

[Константин Викторович]

@PianoIst, Пользуюсь этим, работает чуть лучше чем RX:

Удалить вокал и создать акапеллу

Разделить музыку на инструментальную и вокальную партии с помощью искусственного интеллекта

vocalremover.org

 

[S.Panin]

Сегодня, когда рыскал по теме ИИ, наткнулся на этот сайт

Мне кажется, я в нем из продиджи вокал вытаскивал ради развлечения. Было даже сносно, с минимумом зажовываний.
Фаерстарер, вроде.

 

[PianoIst]

полным фаршем в аранже... неизвестно.

загрузил сейчас оркестровую песенку. В целом — очень прилично, да! Но по-хорошему лучше всё-таки переписать)

 

[StoneJungle]

Нет) обратный процесс (оставить только вокал) ещё более-менее. А вот чтобы вытащить вокал из минуса — уже надо переписывать минус. И, мне кажется, там не нейронка работает а хороший алгортим. Но могу и ошибаться.

Если изотоп не нра, можно телеграм ботом, если удобно, отдельно вокал, отдельно музыка.

 

[PianoIst]

работает чуть лучше

Но заметно хуже предыдущего) Хотя забесплатно — уже и это хорошо

 

[Lowcut]

Кстати. А где такое есть?

GitHub - facebookresearch/demucs: Code for the paper Hybrid Spectrogram and Waveform Source Separation

Code for the paper Hybrid Spectrogram and Waveform Source Separation - facebookresearch/demucs

github.com

 

[BAYANBAYAN]

Но AIVA уже, да, делает ровно то, что ожидаешь от нейронки. Я так и не понял, что там с исполнением: то ли это миди играет, то ли она сама генерирует звук. Если сама генерирует

На ютюбе на их канале написано, что музыка аранжирована человеком. А то, что получается на выходе без доработки можно посмотреть здесь
Пока это очень примитивно.

 

[PianoIst]

@Lowcut, ну.. демукс — тоже такое себе... По крайней мере, на моём примере.

Всё-таки, вокал из песни — это задача не уровня быстрой ретуши. Ретушь можно «штампиком» без всяких навыков сейчас сделать за полчаса. На постер, опять же, не пойдёт, но для семейного архива — более, чем достаточно.
А профессиональная ретушь под глянец, наверное, и сейчас ещё ценится)

 

[PianoIst]

@BAYANBAYAN, спасибо. Мда... Ну вот я вижу потолок в том, что у них на YouTube лежит: оно круто звучит, само по себе вполне самодостаточно, но для проекта класса A+ всё равно нужен человек. Просто потому что потому. Почему я написал сначала.

А если оно сейчас на YouTube так звучит уже после доработки напильником и исполнения живым оркестром.... Жалко оркестр, лучше б исполняли что-то, к чему душа лежит)

Ну и, возвращаясь к тому, что сказала в диалоге с @Pavel Fomitchov ChatGPT — как раз технической составляющей не хватает в первую голову...

 

[Lowcut]

@Lowcut, ну.. демукс — тоже такое себе... По крайней мере, на моём примере.

Всё-таки, вокал из песни — это задача не уровня быстрой ретуши. Ретушь можно «штампиком» без всяких навыков сейчас сделать за полчаса. На постер, опять же, не пойдёт, но для семейного архива — более, чем достаточно.
А профессиональная ретушь под глянец, наверное, и сейчас ещё ценится)

А какой ваш пример?
Касаемо ретуши я уже писал какие нынче расценки. А просто штампиком без частотного разложения ... - это что-то из разряда детских кошмаров.)))

 

[Константин Викторович]

А профессиональная ретушь под глянец, наверное, и сейчас ещё ценится)

В каком плане под глянец? Никто ж не даст издаваться, или как-то более серъёзно реализовывать песню под чужую инструментовку. А для попеть для тренировки, коим это максимум может являться, вполне хорошо, даже через чур хорошо)

 

[Lowcut]

В каком плане под глянец?

Имеется ввиду для журналов, рекламы, каталогов.

 

[Lowcut]

@PianoIst, попробовал на первом попавшемся, вроде ничего

 

[Lowcut]

Может кому-то будет интересно.
Adobe тестирует AI горничную для дикторов:

Enhance Speech from Adobe | Free AI filter for cleaning up spoken audio

This AI audio filter improves spoken audio to make it sound like it was recorded in a soundproofed studio.

podcast.adobe.com

 

[Martin-rmm]

На тот случай, если кто не видел. Абсолютно по теме, но развлекательно. Как перерыв.
Новый фильм про будущее с ИИ. Большой баг (2022)
Я посмотрел и не особо в восторге, но потому что смотрел один, а желательно вдвоем. Это развлечение для двоих взрослых. Тогда вполне норм.

 

[PianoIst]

Мой опыт с резиновым мужиком. Github Copilot

Первая моя ассоциация с Github Copilot - это резиновый мужик-автопилот из фильма "Аэроплан". Помню, в детстве я увидел этот фильм и потом реально думал, что так автопилоты и выглядят: какая-то смешная...

habr.com

 

[dr-music]

Synthesizer V — VST, построенный на ИИ, обученном на живых певцах и певицах, умеет петь на японском, китайском и английском языках. Лучше всего подходит для япона-попсы, но есть и роковые голоса. На ви-контроле развлекаются тем, что взяли из довольно широкого уже набора только четыре голоса (Solaria, Natalie, Kevin, Asterian), сложили из них ансамбль и попробовали спеть композицию из репертуара «Манхэттен Трансфер» (типа джазовый хор) «A Nightingale Sang in Berkely Square». Человек наиграл партитуру в DAW, затем вписал в миди-файл текст (!) и скормил Синтезатору-Вэ. Так вот оно звучит.

 

[Lowcut]

@dr-music, а почему Вы решили, что он на ИИ?