...  ↑

Вот, интересный вопрос. Если можно так визуализировать музыку, почему же нельзя визуализировать речь?

Есть программа для корректировки записей вокалистов - распознает высоту нот и позволяет подправить. Можно попробовать зарядить туда речь, а не пение. Выложить картинку пробную?

Ааа, они делают эту визуализацию с записи нот, а не со звучания реальных инструментов.

Ну у авторов видяшки ноты были, да.