Pitch
KI-Innovation der Johns Hopkins trifft den perfekten Ton
Einst eine Lösung für Amateur-Sänger, die auf Karaoke-Nächten den Ton nicht getroffen haben, haben sich Auto-Tune und andere Software von Clubs bis zur Musikproduktion entwickelt, aber nie über künstlich klingende Töne hinaus.
Nun haben Forscher der Johns Hopkins University diese Technologie weiterentwickelt und dabei signifikante Verbesserungen gegenüber den bisherigen Fähigkeiten herkömmlicher Auto-Tune-Techniken erzielt. Mehr als nur Auto-Tune auf Steroiden, korrigiert diese Innovation namens Diff-Pitcher problemlos falsches Singen, während der ursprüngliche Stimmklang und die Natürlichkeit erhalten bleiben, was ihre möglichen Anwendungen über Unterhaltung und die Musikindustrie hinaus in den Bereich Gesundheitswesen erweitert.
„Diff-Pitcher ist ein generatives tiefes neuronales Netzwerk, das die Tonkorrektur-Technologie auf ein neues Niveau hebt. Seine Präzision und Kontrolle können nicht nur musikalischen Künstlern und Produzenten helfen, sondern auch neue Möglichkeiten in Bereichen wie Stimmrehabilitation und Assistenztechnologien eröffnen“, sagte Teammitglied Jiarui Hai, Doktorand im Department of Electrical and Computer Engineering der Whiting School of Engineering.
Hai und der leitende Forscher Mounya Elhilali, der Charles Renn Faculty Scholar und Professor für Elektro- und Computertechnik, stellten ihre neue Technologie im Herbst 2023 auf der IEEE-Workshop on Applications of Signal Processing to Audio and Acoustics vor.
In der Musik ist die Fähigkeit von Tonkorrektursoftware, den Klang einer Stimme oder eines Instruments auf den gewünschten Ton anzupassen, entscheidend. Diff-Pitcher verwendet fortschrittliche Algorithmen, um die Natürlichkeit und Qualität der Tonkorrektur zu verbessern und damit ältere Tools zu übertreffen. Im Gegensatz zu älterer Software, die auf Paaren von korrigierten und originalen Stimmaufnahmen trainiert wurde, analysiert Diff-Pitcher die visuelle Darstellung (Spektrogramm) der originalen Stimmaufnahmen, die korrigiert werden müssen. Es identifiziert Zielnoten, sagt erforderliche Anpassungen voraus und verwandelt das korrigierte Spektrogramm in Audio, um die Tonkorrektur in zwei einfachen Schritten zu erreichen.
Nach Hai ist Diff-Pitcher nicht nur wegen seiner Fähigkeit, authentische und kontrollierte Stimmen zu erzeugen, bemerkenswert, sondern auch wegen der verwendeten Methode, dies zu erreichen.
„Die Ergebnisse klingen wirklich natürlich, und anders als bei älteren Methoden der Tonkorrektur können wir immer noch regulieren, wie hoch oder tief die Stimme geht“, sagte Hai.
Die Forscher planen, Diff-Pitcher weiter zu verfeinern, um Stimmen noch natürlicher klingen zu lassen und die Fähigkeiten des Tools über die Verbesserung der Musikproduktion hinaus zu erweitern. Sie glauben, dass Diff-Pitcher ein breites Anwendungsspektrum hat, einschließlich der Unterstützung von Personen, die sich einer Stimmrehabilitation unterziehen, insbesondere solche mit stimmlichen Beeinträchtigungen.
„Die Technologie könnte die Behandlung für eine Vielzahl von sprachbezogenen Störungen revolutionieren, wertvolle Unterstützung für postlaryngektomierte Patienten bieten und zur Stimmrehabilitation von Schlaganfallpatienten beitragen“, sagte Hai.
Popular
-
Juli 10, 2024
DJcityDE-Podcast 2024 | NEDI
📷: @bloodyshotz Happy to welcome - NEDI. Vor 2 Wochen stand sie beim LFDY-Event zusammen neben Metro Boomin, DJ Cruz und Frizzo auf der Bühne, heute bei un...
-
Februar 12, 2025
DJcityDE-Podcast 2025 | Kainat
Kainat aus Chemnitz liefert uns diese Woche etwas Abwechslung und hat unter Anderem Baile und Jersey Funk in 30min verpackt. Abseits der Events rund um die...
-
Februar 16, 2022
Neue DJcity Preismodelle
Wir bei DJcity sind stets bemüht euch bestmöglich zufrieden zu stellen. Deshalb gibt es ab sofort 2 neue und flexiblere Abo-Modelle für unseren Record Pool...
-
Januar 31, 2025
DJcityDE Essentials | 05/2025 – Ufo361
Ufo361 meldet sich mit einem Track in style zurück, ihr wisst Bescheid! Hört euch die ganzen Playlist gleich hier oder auf Spotify an. Was euch gefällt, kö...
-
Oktober 6, 2022
IKEA x Swedish House Mafia | OBEGRÄNSAD jetzt erhältlich!
Die bereits angekündigte Kollektion von IKEA und der Swedish House Mafia ist nun hier vollständig erhältlich. Diese umfasst insgesamt 23 Produkte, angefang...
-
Februar 14, 2025
DJcityDE Essentials | 07/2025 – Shirin David
Shirin David releast ihr neues Album »Schlau aber blond« und der erste Track darauf ist auch auf unserer Nummer 1 der Woche! Hört euch die ganzen Playlist...
-
September 18, 2023
Beatsource Playlists | Top Hip-Hop Labels
Anlässlich des 50. Jahrestages der Geburtsstunde des Hip-Hop, hat Beatsource die Lieblings-Hip-Hop-Labels der DJs aus den vergangenen 50 Jahren in jeweils...
-
Oktober 16, 2024
DJcityDE-Podcast 2024 | RACLEZZ
Das Mixtape für den dieswöchigen DJcityDE Podcast liefert uns DJ RACLEZZ. Bekannt als Resident DJ im 808 NACHTKLUB BERLIN begeisterte er mit seiner Hingabe...
-
Januar 31, 2025
Exklusive Interviews & Neuheiten: Mojaxx auf der NAMM 2025
Die NAMM Show in Anaheim, Kalifornien, ist die jährliche Messe, auf der die Musikindustrie ihre neuesten Produkte präsentiert. Mojaxx gibt uns Einblicke in...
-
Mai 31, 2024
DJcityDE Essentials | 20/2024 – Yung Hurn
Hier ist das nächste Update unserer DJcity DE Spotify-Playlist. Jede Woche zeigen wir euch die relevantesten DE Tunes für den Club in einer Liste. Was euch...