Блог

18 июля 2026

Как создать видео с пиано-роллом без MIDI-клавиатуры

Красивые фортепианные видео с падающими нотами, подсвеченными клавишами, цветными следами и синхронизированным пиано-роллом стали популярны на YouTube, TikTok, Instagram и других платформах.

На первый взгляд кажется, что сделать такой ролик несложно. Но большинство программ для визуализации фортепиано требуют сразу несколько отдельных файлов:

• MIDI-файл, который определяет, какие ноты и в какой момент должны появляться на экране;
• аудиофайл, который используется для воспроизведения звука;
• необязательную видеозапись пианиста и клавиатуры.

Такой процесс хорошо работает, если исполнение было записано на цифровом пианино или MIDI-клавиатуре. Инструмент может одновременно передавать MIDI-события на компьютер, пока звук и видео записываются отдельно.

Но что делать, если у вас сохранилась только аудиозапись?

Возможно, произведение было сыграно на акустическом пианино, записано на телефон или сохранено в виде MP3- или WAV-файла. Обычный фортепианный визуализатор не может напрямую превратить такую запись в падающие ноты. Ему необходима структурированная информация о каждой ноте: её высота, момент начала, длительность и принадлежность правой или левой руке.

Поэтому для создания видео с пиано-роллом без MIDI-клавиатуры сначала необходимо преобразовать фортепианную запись в MIDI.

Преобразование фортепианного аудио или видео в MIDI с помощью Musirion

Musirion анализирует сольные фортепианные записи и преобразует их в MIDI-файлы, которые затем можно импортировать в программы для визуализации.

Это позволяет создавать видео с падающими нотами на основе:

• записей акустического пианино;
• исполнений, записанных на телефон;
• старых MP3- и WAV-файлов;
• видео, от которых сохранилась только звуковая дорожка;
• записей, сделанных без MIDI-совместимого инструмента.

Сгенерированный MIDI разделяется на отдельные дорожки:

• Дорожка 0 — метаданные и информация об исполнении. Здесь хранятся MIDI-метаданные, события педали сустейна и другие данные, относящиеся ко всему исполнению.
• Дорожка 1 — правая рука.
• Дорожка 2 — левая рука.

Разделение рук особенно полезно для визуализации. Большинство программ позволяют назначать разным дорожкам собственные цвета и эффекты, поэтому партии правой и левой руки можно показывать отдельно.

Текущее качество транскрипции сольного фортепиано в Musirion составляет приблизительно:

• 98% точности определения начала нот;
• 96% точности определения окончания нот;
• 95% точности разделения нот между правой и левой руками;
• 70% точности определения педали сустейна.

Полученного MIDI обычно достаточно для создания фортепианного визуализатора. Более сложные записи, особенно с активным использованием педали, быстрыми пассажами, сильной реверберацией помещения или фоновым шумом, иногда требуют ручной коррекции.

Общий процесс выглядит так:

Аудио- или видеозапись фортепиано
                ↓
             Musirion
                ↓
MIDI с отдельными дорожками рук
                ↓
Программа для визуализации
                ↓
Видео с падающими нотами

MIDI не должен заменять оригинальный звук. Он управляет анимацией, а исходная фортепианная запись остаётся звуковой дорожкой готового видео.

Шаг 1. Подготовьте аудиозапись

Автоматическая транскрипция лучше всего работает с записями сольного фортепиано.

Для получения более точного результата:

• используйте чистую запись с минимальным фоновым шумом;
• избегайте речи, вокала и других инструментов;
• не обрезайте начало первой ноты;
• по возможности уменьшайте сильную реверберацию помещения;
• используйте WAV или другой формат без потерь, если он доступен;
• если запись сжата, выбирайте MP3 максимально высокого качества.

Записи с телефона тоже могут дать хороший результат, особенно если устройство находилось недалеко от инструмента, а в помещении было относительно тихо.

Шаг 2. Преобразуйте запись в MIDI

Загрузите запись фортепиано в Musirion и дождитесь завершения обработки.

После окончания транскрипции скачайте полученный MIDI-файл. Отдельные дорожки правой и левой руки позже позволят создать понятную двухцветную визуализацию.

Перед переходом к работе с видео стоит проверить MIDI на очевидные ошибки:

• пропущенные ноты;
• лишние короткие ноты;
• ноты, ошибочно отнесённые к другой руке;
• неправильные окончания нот;
• события педали, не совпадающие с записью;
• обрезанное начало или окончание произведения.

Для исправления можно использовать редактор пиано-ролла или цифровую звуковую рабочую станцию. При этом небольшие неточности могут быть практически незаметны в простой визуализации.

Шаг 3. Создайте визуализацию в SeeMusic

Когда MIDI-файл будет готов, импортируйте его в SeeMusic.

SeeMusic специально предназначен для создания фортепианных видео с визуализацией. Программа использует MIDI для генерации падающих нот и позволяет объединить анимацию, аудио и необязательную видеозапись в одном проекте.

Импортируйте MIDI

Откройте SeeMusic и импортируйте MIDI-файл, скачанный из Musirion.

Дорожки с нотами должны отображаться отдельно:

• дорожка 1 содержит партию правой руки;
• дорожка 2 содержит партию левой руки.

Дорожка 0 содержит метаданные и события педали, а не ноты, предназначенные для падающей анимации.

Воспроизведите MIDI внутри SeeMusic и проверьте, что:

• все ожидаемые ноты отображаются;
• партии рук находятся на правильных дорожках;
• начало и окончание произведения не обрезаны;
• отсутствуют очевидные лишние ноты;
• визуализация остаётся синхронизированной в быстрых пассажах.

В SeeMusic есть инструменты редактирования MIDI, поэтому небольшие ошибки можно исправить до финального рендеринга.

Назначьте разные цвета рукам

Поскольку руки записаны на отдельных дорожках, им можно назначить разные цвета или стили.

Например:

• синий или голубой для правой руки;
• оранжевый, розовый или фиолетовый для левой руки.

Разные цвета упрощают восприятие плотных пассажей и делают видео визуально более аккуратным.

Не стоит использовать слишком много оттенков. Задача визуализации — сделать исполнение понятнее, а не перегрузить изображение.

Шаг 4. Добавьте исходное аудио

MIDI должен управлять анимацией, но в качестве звуковой дорожки обычно лучше использовать оригинальную запись.

Импортируйте в проект SeeMusic тот же аудиофайл, который был преобразован в Musirion.

В результате проект будет использовать два синхронизированных источника:

• MIDI управляет положением, временем появления и длительностью падающих нот;
• оригинальное аудио сохраняет звучание настоящего инструмента, акустику помещения и особенности исполнения.

Синхронизируйте MIDI и аудио по первой отчётливо слышимой ноте.

Если запись начинается с тишины, речи, движений или посторонних звуков, предварительно обрежьте её либо задайте нужное смещение. После синхронизации при необходимости отключите синтезированное MIDI-звучание, чтобы в готовом ролике оставалась только оригинальная запись.

Проверьте несколько участков произведения. Если начало совпадает, а к концу появляется рассинхронизация, один из файлов мог быть записан или экспортирован с немного другой скоростью.

Шаг 5. Добавьте видеозапись

Видео с камерой необязательно. Полноценный ролик с падающими нотами можно создать только из MIDI и аудио.

Если запись исполнения сохранилась, импортируйте её в тот же проект SeeMusic.

Проще всего синхронизировать файлы по первому видимому нажатию клавиши:

1. найдите первую ноту в MIDI;
2. найдите ту же ноту на аудиодорожке;
3. совместите их с кадром, на котором соответствующая клавиша начинает двигаться.

После синхронизации начала проверьте несколько более поздних участков, чтобы убедиться, что руки, звук и падающие ноты продолжают совпадать.

Для наиболее аккуратного результата лучше снимать клавиатуру строго сверху или под небольшим возвышенным углом. Камера должна быть зафиксирована, а вся клавиатура — оставаться в кадре.

Шаг 6. Настройте внешний вид падающих нот

SeeMusic позволяет изменять множество параметров визуализации:

• цвета нот;
• отдельные стили для разных дорожек;
• двухмерные или трёхмерные ноты;
• градиенты и контуры;
• освещение и свечение;
• частицы;
• движение камеры;
• внешний вид виртуальной клавиатуры;
• фон и готовые визуальные пресеты.

Обычно лучше всего выглядит сдержанный стиль:

• используйте один основной цвет для каждой руки;
• выбирайте тёмный или нейтральный фон;
• не злоупотребляйте свечением;
• уменьшайте количество частиц в быстрых и плотных фрагментах;
• следите, чтобы отдельные ноты оставались различимыми;
• избегайте эффектов, закрывающих настоящие руки или клавиатуру.

Если вы планируете публиковать несколько видео, сохраните пресет и используйте его повторно. Постоянная цветовая схема и композиция сделают канал более узнаваемым.

Шаг 7. Экспортируйте готовое видео

После синхронизации MIDI, аудио и необязательной видеозаписи экспортируйте готовый ролик из SeeMusic.

Рекомендуемые параметры зависят от платформы:

• YouTube: 16:9, 1920×1080 или 3840×2160;
• YouTube Shorts: 9:16, 1080×1920;
• TikTok: 9:16, 1080×1920;
• Instagram Reels: 9:16, 1080×1920;
• публикации в Instagram: квадратный или вертикальный формат.

Для падающих нот частота 60 кадров в секунду обычно выглядит плавнее, чем 30 кадров, особенно в быстрых пассажах.

При этом для большинства видео достаточно 1080p и 60 кадров в секунду. Экспорт в 4K имеет смысл только тогда, когда исходное видео и визуальные элементы действительно выигрывают от более высокого разрешения.

Полный процесс выглядит так:

Исходное фортепианное аудио или видео
                  ↓
       Musirion: аудио в MIDI
                  ↓
 SeeMusic: визуализация падающих нот
                  +
          оригинальное аудио
                  +
       необязательная видеозапись
                  ↓
     Готовое видео с пиано-роллом

Ограничения

Преобразование аудио в MIDI не всегда бывает идеальным.

Лучшие результаты обычно получаются на чистых записях сольного фортепиано. Точность может снижаться, если в аудио присутствуют:

• активное использование педали сустейна;
• очень быстрые повторяющиеся ноты;
• плотные аккорды;
• фоновый шум;
• сильная реверберация помещения;
• другие инструменты или вокал;
• клиппинг и артефакты сжатия.

Любая ошибка транскрипции попадёт и в визуализацию. Лишняя MIDI-нота превратится в лишний падающий блок, а пропущенная создаст заметный пробел.

Поэтому лучше проверить MIDI до того, как вы потратите время на оформление эффектов и финальный рендеринг.

Определение педали сейчас работает менее точно, чем распознавание начала и окончания нот или разделение между руками. Обычно это слабее влияет на саму анимацию, но может быть заметно при использовании синтезированного MIDI-звука вместо оригинальной записи.

Заключение

Большинство фортепианных визуализаторов требуют MIDI, потому что обычное аудио не содержит явного списка нот, их длительностей, моментов начала и принадлежности определённой руке.

Раньше это означало, что видео с падающими нотами нужно было планировать заранее и записывать на цифровом пианино или MIDI-клавиатуре.

С помощью Musirion уже существующую аудио- или видеозапись сольного фортепиано можно преобразовать в структурированный MIDI с отдельными дорожками правой и левой руки. Затем этот MIDI можно импортировать в SeeMusic и использовать для управления визуализацией, сохранив оригинальное аудио в качестве звуковой дорожки.

Так обычную запись акустического пианино можно превратить в аккуратное видео с падающими нотами без MIDI-клавиатуры.