Blog

capella audio2score war bisher nicht so gut im Erkennen von Popsongs. Das hat sich jetzt mit Version 5 geändert.

Wir haben eine neue KI speziell für Popsongs trainiert, die in der Lage ist, Gesang, instrumentale Melodie und Begleitung zu erkennen und zu trennen.

Natürlich gelten auch hier ein paar Einschränkungen:

• Der Gesang sollte möglichst klar und einstimmig sein (kein Sprechgesang).
• Die Begleitung sollte möglichst harmonisch sein (kein Heavy Metal Rock o.ä.).
• Für eine gute Taktstrich-Erkennung sollte der Beat möglichst klar sein.

Wenn dies erfüllt ist, könnt ihr mit einem ziemlich guten Ergebnis rechnen!

Wir zeigen euch hier an einem Beispiel, wie die neue Pop-Erkennung funktioniert.

Audio-Datei laden

Wählt wie gewohnt eure Audio-Datei.

Wichtig: Verwendet beim Anlegen des Projekts die neue Option Pop (mit Gesang).

Unser Beispiel-Song, den wir hier verwenden, klingt so:

Ensemble zusammenstellen

Nachdem die Berechnung beendet ist, seht ihr die neuen Optionen für die Pop-Erkennung:

Wir sagen hier durch Auswahl der entsprechenden Felder,

• dass der Gesang in einer eigenen Notenzeile notiert werden soll
• dass die instrumentalen Melodietöne in einer eigenen Notenzeile notiert werden sollen
• dass die Begleitung als Klavier notiert werden soll
• dass zusätzlich (für Keyboarder) die Harmonien als Akkorde und Basston ausgeschrieben werden sollen (nur in der pro-Version verfügbar)

Das bekommen wir als Ergebnis:

Nur für Klavier?

Wollt ihr den Song lieber allein auf dem Klavier spielen und auch die Gesangsstimme mitspielen, ohne dass ihr singen müsst? Das geht auch – wählt einfach folgende Einstellung:

Das Ergebnis sieht dann so aus:

Bei dieser Einstellung notiert capella audio2score die Gesangstöne in der rechten Hand als Oberstimme (Hälse nach oben), Begleittöne als Unterstimme (Hälse nach unten). An der Halsrichtung könnt ihr also noch ablesen, was der Gesang ist.

Für Streichquartett oder Bläserquintett? (nur pro-Version)

Auch das ist kein Problem – wählt einfach das gewünschte Ensemble aus, und capella audio2score verteilt die erkannten Begleittöne automatisch auf mehrere Stimmen:

Wenn ihr euer Wunsch-Ensemble nicht in der Klappliste findet, könnt ihr (ähnlich wie im capella-Mustersystem) auch ein ganz eigenes Ensemble zusammenstellen. Dazu müsst ihr ins Hauptprogramm wechseln (nur pro-Version).

Kombi mit ganzheitlicher Erkennung (nur pro-Version)

Die neue Pop-Erkennung arbeitet auch gut mit der ganzheitlichen Erkennung zusammen. „Ganzheitlich“ bedeutet: capella audio2score setzt die erkannten Harmonie-Symbole als Noten aus, wobei rhythmische Muster verwendet werden.

Das ist also so ähnlich wie bei der Begleitautomatik eines Keyboards: Vorgegeben werden Harmonie, rhythmische Muster und sinnvolle Tonhöhenbereiche, und heraus kommen Begleitstimmen für beliebig viele Instrumente als Notenschrift – z.B. für euer Schulorchester.

Um die ganzheitliche Erkennung zu nutzen, aktiviert ihr die Option Ganzheitlich und wählt das gewünschte Ensemble aus:

Die Einstellungen der ganzheitlichen Erkennung (Ensemble, rhythmische Muster, Tonhöhenbereiche) könnt ihr auf Wunsch völlig individuell umgestalten, dazu ist ein Wechsel ins Hauptprogramm nötig.

Der neue Tonteppich (nur pro-Version)

Eingefleischte Benutzer der Version 4 werden den Tonteppich im Hauptprogramm kennen, der die Töne des Originals und ihre Klangfarbe grafisch anzeigt. In Version 5 ist jetzt neu, dass zwischen Gesangstönen (grün), instrumentalen Melodietönen (violett) und Begleittönen (blau) unterschieden wird. In gewohnter Weise könnt ihr hier eure Nachbearbeitung erledigen, z.B. Töne anderen Stimmen zuweisen oder ganze Passagen umschreiben.

Was gibt es sonst noch Neues?

Neu in Version 5 ist außerdem, dass capella audio2score selbstständig versucht, die Taktart (3/4 oder 4/4) zu erkennen. Sollte das Programm falschliegen, könnt ihr den Takt natürlich wie früher auf dem Tab „Taktstriche“ korrigieren.

pro- oder start-Version?

Wahrscheinlich habt ihr es an den Anmerkungen bereits gemerkt: Wie vorher schon gibt es die Version 5 auch wieder als pro-Version und als start-Version, wobei die start-Version nur einen Teil der Funktionen bietet.

Bei der Pop-Erkennung kann auch die start-Version Gesang und instrumentale Melodie trennen und in eigenen Zeilen notieren, die Begleitung kann aber nur als Klavier notiert werden. Außerdem fehlt die ganzheitliche Erkennung und der Wechsel ins Hauptprogramm (kein Tonteppich und keine Nachbearbeitung).

Probiert es aus!

So, und damit haben wir von unserer Seite alles Wichtige gesagt. Ach ja, den hier verwendeten Popsong findet ihr übrigens in der Testversion als Beispiel „Song Schuld“ mitgeliefert – falls ihr das hier Beschriebene damit selbst nachvollziehen wollt.

Und nun würden wir uns natürlich freuen, wenn ihr die neue Version mit eurem eigenen Lieblings-Popsong ausprobiert – wir wünschen euch dabei viel Spaß und Erfolg!

Rechtliche Hinweise

Bei dem hier verwendeten Song handelt es sich um:

Und wiegt die Schuld auch noch so schwer (Ausschnitt)
Jürgen Werth
www.juergen-werth.de

Herzlichen Dank!