idle() the music of ipe()

No. 3· behind-the-music

Как делается песня AI lo-fi

Как песня AI lo-fi проекта idle() проходит путь от текста до релиза: кто что передаёт, где мы проверяем и как прямо говорим, что музыка сделана с ИИ.

AI Эта статья переведена с помощью ИИ. Читать оригинал (English)

Обложка альбома: наливаемый латте и надписи dear(you); vol.1, dear you и строка по-корейски, означающая «тебе, кто дожил до конца этого дня»

Обложка dear(you); vol.1. Десять песен на нём сделаны в порядке, описанном ниже.

Этот lo-fi сделан ИИ? Да, в Suno. Здесь пять передач эстафеты от текста до релиза и место, где вмешивается человек. Нас иногда спрашивают, как делается песня idle(). Ответ в одну строку — «с помощью ИИ», но внутри этой строки больше передач и проверок, чем можно подумать. В этой записи мы проходим по порядку производства, который установили для себя, от первой строки текста до релиза. Это описание процедуры, которую мы записали, поэтому оно не значит, что каждая песня прошла её без единого отклонения.

Сначала самое важное предложение. Музыка создаётся с помощью ИИ (Suno). Тексты набрасывает ИИ, а проверяет человек. Остальная часть записи — по сути, объяснение того, как это предложение выглядит в виде настоящей работы.

Пять передач

Схема из пяти этапов, соединённых стрелками: текст, музыка, визуал, проверка и релиз, у каждого — ответственная роль и то, что он создаёт. Этап проверки обведён золотом

Пять этапов, через которые проходит одна песня. Четвёртый, проверка, — ворота, которые нельзя пропустить.

Песня проходит пять этапов: текст, музыка, визуал, проверка и релиз. Следующий этап начинается только тогда, когда закончен предыдущий, и ответственный человек меняется на каждом шаге. Каждую такую смену мы называем передачей, а в этой записи считаем ещё и планирование, которое предшествует первой строке текста. Передача состоит из файлов и статусов, а не из разговора. Когда ответственный за текст завершает файл песни и ставит ему статус «заказана композиция», ответственный за музыку читает этот файл и приступает к работе. Поскольку всегда записано, кто какой файл и в каком состоянии передал, контекст по дороге не теряется.

Статусы, через которые проходит песня, тоже зафиксированы. Новый текст — «черновик». Пока формируются его тон и эмоциональное течение, он «в доработке». После передачи музыке он получает статус «заказана композиция», пока создаётся звук — «в работе», и только после прохождения проверки становится «выпущена». Один взгляд на эту доску — и видно, в чьих руках песня сейчас.

Этап 0: планирование, потому что альбом идёт раньше песни

Первый шаг на самом деле касается альбома, а не песни. Сначала рисуются концепция, порядок треков и течение чувств. Для dear(you); vol.1 сначала были заданы концепция («десять писем тебе, кто пережил ещё один трудный день») и дуга из десяти чувств (сопереживание, понимание, страх, успокоение, отдых, связь, благодарность, признание, надежда, покой), и каждая песня получила своё место на этой дуге ещё до того, как дошла до этапа текста. Песня начинается как одна ячейка в альбоме, а не как отдельное произведение, и мы думаем, что отчасти поэтому наши песни похожи друг на друга по структуре.

Этап 1: текст, одна песня в двух версиях

Результат этапа текста — один файл песни. В нём тема, настроение, история и текст в двух версиях: в одной основной язык корейский, в другой английский. Корейская сторона — оригинал, а английская пишется как адаптация, передающая тон и чувство, а не слова. Если буквальный перевод ИИ спеть как есть, ритм и эмоция ломаются, и качество песни падает.

Версия с английским основным языком поётся по-английски женским вокалом с корейскими шёпотами, а версия с корейским основным языком поётся по-корейски мужским вокалом с английскими шёпотами. Обе заканчиваются шёпотом ipe. be still

Правило двух версий: каждая версия поётся на одном языке, а другой язык появляется только шёпотом.

Принцип умещается в одну строку: язык, на котором поют, остаётся неизменным внутри версии, а перевод подаётся в виде субтитров. Это значит, что мы не вталкиваем буквальный перевод в мелодию. Другой язык добавляется лишь коротким шёпотом, так что английская версия несёт одно-два корейских слова, а корейская — одно английское. Эти шёпоты — шов, который удерживает две версии вместе как одну песню.

Есть и ещё одно, что этап текста обязан сделать: поставить «ipe. be still» в самый конец песни. Это шёпот на одном дыхании, закреплённый на английском, и каждая песня после dear(you); заканчивается им. Файл текста считается готовым и может быть передан музыке только после того, как эта подпись на месте.

Этап 2: музыка, от слов к звуку

Музыкальная сторона берёт файл текста и собирает производственный пакет. В пакете — исполняемый текст каждой версии и стилевой промпт: письменное описание жанра, инструментов, характера голоса и фактуры микса. Первая песня альбома, например, описана как эмбиент-lo-fi с мягким пианино, тёплой гитарой, нежными пэдами, шумом винила и лёгкой атмосферой дождя, со сладким женским вокалом для английской версии и мягким мужским вокалом для корейской.

С этим пакетом звук и вокал создаются в Suno, музыкальном инструменте на основе ИИ. Одна генерация редко даёт именно то, что нужно, поэтому пробуют несколько и утверждают одну. Утверждённая версия и становится песней. Когда для песни делают субтитры к видео, файл субтитров должен браться из этой утверждённой версии, потому что тайминг меняется с каждой генерацией. Это правило записано в нашей процедуре.

Здесь в дело вступает перевод — в виде субтитров. На YouTube их два вида: субтитры, которые зритель включает сам, и текст, вшитый в картинку. Автоматическая синхронизация для корейского текста недоступна, поэтому файл субтитров приходится загружать вручную, а песню, слова которой мы хотим выделить, можно превратить в лирик-видео с вшитым текстом. У каждого языка своя обложка и свой файл субтитров.

Этап 3: визуал, лицо для звука

Когда звук утверждён, визуальная сторона делает обложку, превью для YouTube и, если нужно, зацикленный фон для видео. Исходные данные — концепция песни, звук и тон времени суток, к которому песня относится. Сезон 1 делит один день на четыре альбома (ночь, рассвет, утро и вечер), поэтому песни одного альбома делят цвета одного времени суток.

Несколько визуальных правил зафиксированы. Палитра строится вокруг глубокого тёмно-синего, тёплого золотого, шалфейно-зелёного и кремового, а в шрифтовом оформлении используется моноширинный шрифт, напоминающий редактор кода. На обложке английский — главный, а корейский — вспомогательная строка. Посмотрите на обложку первой песни, и вы увидите английское название крупным шрифтом, а под ним — корейское.

Этап 4: проверка, ворота, которые нельзя пропустить

Когда текст, звук, обложка, превью и карточка релиза на этом сайте готовы, прямо перед релизом открывается проверка. Эти ворота пропустить нельзя. У них две пары глаз. Одна смотрит на качество и риски: чисто ли звучит, совпадают ли язык и голос в звуке с текстом (женский голос для английской версии, мужской для корейской), подходят ли чувство и порядок треков плану альбома, нет ли авторско-правовых рисков, таких как маркировка ИИ или плагиат, и верны ли ссылки и метаданные. Другая смотрит на бренд: палитру, шрифт, тон, который мы описываем как тишина перед шумом, и иерархию языков на обложке.

Несколько пунктов — жёсткие остановки. Стоит ли «ipe. be still» в самом конце? Соблюдена ли иерархия языков на обложке и превью? Совпадают ли ссылки и языки в карточке релиза на сайте? Если подписи нет, песню возвращают, исправляют и проверяют снова. Проверяющий лишь указывает на проблемы и не переписывает текст. Исправлять — дело того, кто делал. Разделение того, кто проверяет, и того, кто сделал, — сердце этих ворот.

Этап 5: релиз, загрузить, связать, записать

После проверки музыкальная сторона загружает песню на YouTube и, для песен, которым это нужно, занимается распространением на стриминговые сервисы. Шаг загрузки включает проверку пометки о том, что контент создан с помощью ИИ. Затем статус песни становится «выпущена», ссылки на YouTube записываются на доске песен, а карточка релиза на этом сайте и сводные документы обновляются. Песня может выглядеть законченной, и у неё всё ещё остаётся одна задача: проверить, что её ссылки согласуются везде, где они встречаются.

Способ релиза с самого начала гибридный: синглы выходят по одному, чтобы канал не замирал, а когда в серии набирается достаточно песен, их собирают в альбом. Все десять песен dear(you); vol.1 есть на YouTube в английской и корейской версиях. Длинное видео полного альбома, чтобы прослушать его целиком за один присест, тоже есть на YouTube.

Почему мы ставим «сделано с помощью ИИ» на первое место

Вопрос, который нам задают чаще всего, в конце концов один: зачем показывать, что это сделано не вручную? Наш ответ прост. Скрывать нечего, а не скрывать — это подход, который держится долго. Создание вокала с помощью ИИ записано в наших рабочих принципах как вариант по умолчанию, и одна из причин в том, что это согласуется с идеей бренда открыто сообщать о производстве с помощью ИИ. Люди задают направление, а затем читают черновик, проверяют его и выбирают из него. ИИ быстро создаёт черновики и звук. Мы не смешиваем одно с другим. Мы записываем, что берёт на себя каждый, и это наше обещание.

Слушать

Десять песен dear(you); vol.1, сделанные в порядке, описанном выше. Каждая есть на YouTube в английской и корейской версиях.

Весь канал — на YouTube ipe-rest.

Надеемся, что в следующий раз, слушая песню, вы заметите чуть больше. За шёпотом в самом конце стоят пять этапов и одни ворота, которые нельзя пропустить, между текстом и релизом. Слушать можно на главной странице idle().