Zum Inhalt springen

„Sprachsynthese“ – Versionsunterschied

aus Wikipedia, der freien Enzyklopädie
Versionsgeschichte interaktiv durchsuchen
[ungesichtete Version][gesichtete Version]
← Zum vorherigen Versionsunterschied
Inhalt gelöscht Inhalt hinzugefügt
VisuellWikitext
miniabsätze zusammengefasst
K doppeltes Leerzeichen entfernt
 
(462 dazwischenliegende Versionen von mehr als 100 Benutzern, die nicht angezeigt werden)
Zeile 1: Zeile 1:
[[Datei:Homer Dudley (October 1940). "The Carrier Nature of Speech". Bell System Technical Journal, XIX(4);495-515. -- Fig.7 Schematic circuit of the vocoder (derived from Fig.8).jpg|mini|Schema für den „Vocoder“ von Homer Dudley (1940)<!-- https://en.wikipedia.org/wiki/Homer_Dudley -->]]
'''Sprachsynthese''' nennt man die Erzeugung von gesprochener [[Sprache]] durch einen Computer. Ziel ist es dabei, der [[Stimme|menschlichen Stimme]] nahe zu kommen. Sprachsynthese wird auch synonym zu ''Vorleseautomat'' oder ''Text-to-Speech-System (TTS)'' verwendet. Dabei wird ein Text in ein Sprachsignal umgewandelt.


Unter '''Sprachsynthese''' versteht man die künstliche Erzeugung der menschlichen [[Stimmbildung|Sprechstimme]]. Durch '''Text-to-Speech''' ('''TTS''') (oder ''Vorleseautomat'') wird [[Fließtext]] in eine akustische '''Sprachausgabe''' überführt.
Grundsätzlich lassen sich zwei Ansätze zur Erzeugung von Sprachsignalen unterscheiden. Zum einen kann durch die sogenannte [[Signalmodellierung]] auf Sprachaufnahmen ([[Sample]]s) zurückgegriffen werden. Zum anderen kann das Signal aber auch durch die sogenannte Physiologische Modellierung, vollständig im Rechner erzeugt werden. Während die ersten Systeme auf [[Formant]]synthesen beruhten, basieren die zurzeit (Februar 2005) industriell eingesetzten Systeme vorwiegend auf Signalmodellierung. Ein besonderes Problem für die Sprachsynthese ist die Erzeugung einer natürlichen [[Prosodie|Sprachmelodie (Prosodie)]].

Genügend [[Rechenleistung]] vorausgesetzt, verwendet man heute sog. [[Deep Learning|Tiefe Neuronale Netze]] (DNN), die man mit vielen Stunden hochwertiger Sprachaufnahme anlernt, {{EnS|Deep learning speech synthesis}}.<!-- https://en.wikipedia.org/wiki/Deep_learning_speech_synthesis -->

Bis Mitte der 2010er-Jahre verwendete man den analytischen Ansatz. Dabei wird der Text über mehrere Zwischenstufen zu Sprache gewandelt, diese sind meist: Eingangstext, Lautschrift, Phoneme, Aneinanderstellung von aufgenommenen oder synthetisierten Diphonen. Ein besonderes Problem ist die Erzeugung einer natürlichen Sprachmelodie ([[Prosodie]]).

Die Herkunft der Diphone unterscheidet grundsätzlich zwischen zwei Methoden. Das Signal kann durch die sogenannte physiologische (artikulatorische) Modellierung vollständig im Rechner erzeugt werden. Oder aber es wird auf Sprachaufnahmen ([[Sampling (Musik)|Samples]]) zurückgegriffen, was teilweise auch als Signalmodellierung bezeichnet wird.<!-- Werden Samples hier wirklich als Signalmodellierung bezeichnet? Sonst löschen. -Alex42 -->

Während die geschichtlich ersten Systeme auf [[Formant]]synthesen beruhten, basierten die bisher industriell eingesetzten Systeme vorwiegend auf Signalmodellierung.


== Geschichte ==
== Geschichte ==
[[Datei:Kempelen Speakingmachine.JPG|mini|Nachbau der „Sprechmaschine“ von Wolfgang von Kempelen (2009)]]
Schon lange vor der Erfindung der elektronischen [[Signalverarbeitung]] versuchten Wissenschaftler Maschinen zu kronstruieren, die menschliche Sprache erzeugten. Frühe Exemplare der sogenannten „Sprechenden Köpfe“ wurden von [[Silvester II. (Papst)|Gerbert von Aurillac]] (1003), [[Albertus Magnus]] (1198&ndash;1280), und [[Roger Bacon]] (1214&ndash;1294) entwickelt.
[[Datei:Synthesizer after Helmholtz by Koenig 1865.jpg|mini|Nachbau der Konstruktion von Hermann von Helmholtz (1865)]]
[[Datei:Bell telephone magazine (1922) (14733635746).jpg|mini|Demonstration des „Voders“ 1939]]


Schon lange vor der Erfindung der elektronischen [[Signalverarbeitung]] versuchten Wissenschaftler Maschinen zu konstruieren, die menschliche Sprache erzeugen können. [[Silvester II.|Gerbert von Aurillac]] (1003) wird ein aus Bronze gefertigter „Sprechender Kopf“ zugeschrieben, von dem berichtet wurde, dass er „ja“ und „nein“ sagen konnte. Wohl eher in den Bereich der Legenden gehören die Apparate von [[Albertus Magnus]] (1198–1280) und [[Roger Bacon]] (1214–1294).
Der dänische Wissenschafler [[Christian Gottlieb Kratzenstein|Christian Kratzenstein]] baute 1779 ein Modell des menschlichen [[Vokaltrakt]]s, welches fünf lange [[Vokal]]e (a, e, i, o and u) produzieren konnte. [[Wolfgang von Kempelen]] entwickelte kurz darauf eine Sprechmaschine, welche er 1791 in seiner Veröffentlichung „Mechanismus der menschlichen Sprache nebst der Beschreibung seiner sprechenden Maschine“. Angetrieben wurde dieser Apparat durch einen Blasebalg, der Luft durch zwei elastische Stimmbänder blies. Diese liesen sich über einen Hebelmechanismus unterschiedlich spannen und so in der Tonhöhe verstellen. An den Stimmbändern schluss ein Ledertubus an, welcher durch eine Hand verformt werden konnte, und so die variable Geometrie und Resonanzverhalten des Vokaltrats nachbildete. Man konnte sich den Appart umschnallen und mit den Arm und beiden Händen bedienen. Von Kempelen schrieb:


Der deutsche, in Kopenhagen tätige Wissenschaftler [[Christian Gottlieb Kratzenstein|Christian Kratzenstein]] baute 1779 aufgrund eines Preisausschreibens der St. Petersburger Akademie eine „Sprachorgel“, die durch freischwingende [[Lingualpfeife#Lingualpfeifen|Lingualpfeifen]] mit dem menschlichen [[Vokaltrakt]] nachgebildeten Resonatoren fünf lange [[Vokal]]e (a, e, i, o und u) synthetisieren konnte. [[Wolfgang von Kempelen]] entwickelte bereits seit ca. 1760 eine [[Wolfgang von Kempelen#Sprechmaschine|Sprechmaschine]], die er 1791 in seiner Veröffentlichung „Mechanismus der menschlichen Sprache nebst der Beschreibung seiner sprechenden Maschine“ darstellte. Diese Synthese basierte wie Kratzensteins auf einem Blasebalg als Lungenäquivalent, die eigentliche Anregung geschah aber erheblich anatomienäher durch eine einzelne, aufschlagende Lingualpfeife. Damit waren einige Vokale und auch Plosive möglich. Darüber hinaus ließen sich über verschiedene Mechanismen einige Frikative darstellen. An den Stimmbändern schloss ein Ledertubus an, der durch eine Hand verformt werden konnte, und so die variable Geometrie und Resonanzverhalten des Vokaltrakts nachbildete. Von Kempelen schrieb:
:''„in einer Zeit von drei Wochen eine bewundernswerte Fertigkeit im Spielen erlangen, besonders wenn man sich auf die lateinische, französische oder italienische Sprache verlegt, denn die deutsche ist ''[aufgrund der häufigen Konsonantenbündel]'' um vieles schwerer.“''
{{Zitat|in einer Zeit von drei Wochen eine bewundernswerte Fertigkeit im Spielen erlangen, besonders wenn man sich auf die lateinische, französische oder italienische Sprache verlegt, denn die deutsche ist ''[aufgrund der häufigen Konsonantenbündel]'' um vieles schwerer.}}


[[Charles Wheatstone]] baute 1837 eine „Speaking Machine“, welche auf disem Entwurf beruht; 1857 baute M. Faber die „Euphonia“. Ein Nachbau findet sich im [[Deutsches Museum|Deutschen Museum]].
[[Charles Wheatstone]] baute 1837 eine ''Speaking Machine'', die auf diesem Entwurf beruht, ein Nachbau findet sich im [[Deutsches Museum|Deutschen Museum]]. 1857 baute [[Joseph Faber]] die ''[[Euphonia (Sprachmaschine)|Euphonia]]'', die ebenso diesem Prinzip folgt.


Ende des 19. Jahrhunderts entwickelte sich das Interesse weg vom Nachbau menschlicher Sprachorgane (genetische Sprachsynthese), hin zur Simulation des akustischen Raumes (gennematische Sprachsynthese). So synthetisierte [[Hermann von Helmholtz]] erstmals Vokale mit Hilfe von Stimmgabeln, die auf die Resonanzfrequenzen des Vokaltraktes in bestimmten Vokalstellungen abgestimmt waren. Diese Resonanzfrequenzen werden als [[Formanten]] bezeichnet. Sprachsynthese durch Kombination von Formanten war technischer Mainstream bis in die Mitte der 1990er Jahre.
In den [[Bell Labs]] wurde in den 1930s der „[[Vocoder]]“, eine Tastaturgesteuerte elektronischer Sprachsynthesiezer entwicklet, über den gesagt wurde, dass er klar verständlich war. Homer Dudley verbesserte diese Maschine zum VODER, welcher in der [[Weltausstellung]] 1939 präsentiert wurde.


In den [[Bell Labs]] wurde in den 1930ern der ''[[Vocoder]]'', ein tastaturgesteuerter elektronischer Sprachsynthesizer entwickelt, über den gesagt wurde, dass er klar verständlich war. Homer Dudley verbesserte diese Maschine zum ''[[Voder]]'', der in der [[1939 New York World’s Fair|Weltausstellung 1939]] präsentiert wurde. Der Voder benutzte elektrische Oszillatoren zur Erzeugung der Formantfrequenzen.
Die ersten computerbasierten Sprachsynthesesysteme wurden in den späten 1950ern entwickelt, das erste komplette Text-To-Speech-System 1968 fertiggestellt. Der Physiker [[John Larry Kelly, Jr]] entwickelte 1961 bei den Bell Labs eine Sprachsynthese mit einem [[IBM 704]], und lies ihn das Lied „[[Daisy Bell]]“ singen. Der Regiseur [[Arthur C. Clarke]] war davon so beeindruckt, dass er es in den Film „[[2001: A Space Odyssey]]“ integrierte.


Die ersten computerbasierten Sprachsynthesesysteme wurden in den späten 1950ern entwickelt, das erste komplette Text-To-Speech-System 1968 fertiggestellt. Der Physiker [[John Larry Kelly, Jr]] und die Informatikerin [[Carol Lochbaum]] entwickelten 1961 bei den Bell Labs eine Sprachsynthese mit einem [[IBM 704]] und ließen ihn das Lied ''[[Daisy Bell]]'' singen. Der Regisseur [[Stanley Kubrick]] war davon so beeindruckt, dass er es in den Film ''[[2001: A Space Odyssey]]'' integrierte.
Während frühe elektronische Sprachsynthesen noch sehr roboterhaft klangen und teilweise schwer verständlich waren, erreichen sie etwa seit der Jahrtausendwende eine Qualität, bei der es mitunter schwierig ist, sie von menschlichen Sprechern zu unterscheiden.


== Gegenwart ==
'''References''':
Während frühe elektronische Sprachsynthesen noch sehr roboterhaft klangen und teilweise schwer verständlich waren, erreichen sie etwa seit der Jahrtausendwende eine Qualität, bei der es mitunter schwierig ist, sie von menschlichen Sprechern zu unterscheiden. Das ist hauptsächlich der Tatsache zu verdanken, dass sich die Technologie von der eigentlichen Synthese des Sprachsignals abgewandt hat und sich darauf konzentriert, aufgenommene Sprachsegmente optimal zu verketten.<ref>{{Webarchiv|url=http://www.cs.indiana.edu/rhythmsp/ASA/Contents.html |wayback=20060704081325 |text=Dennis Klatt’s History of Speech Synthesis}}</ref><ref>{{Internetquelle |autor=Sami Lemmetty |url=http://research.spa.aalto.fi/publications/theses/lemmetty_mst/chap2.html |titel=History and Development of Speech Synthesis |werk=Review of Speech Synthesis Technology |hrsg=HELSINKI UNIVERSITY OF TECHNOLOGY |datum=1999-06-01 |zugriff=2019-03-14 |sprache=en}}</ref><ref> Arne Hoxbergen: ''[http://waste.informatik.hu-berlin.de/Diplom/studienarbeit_hoxbergen.pdf Die Geschichte der Sprachsynthese anhand einiger ausgewählter Beispiele] (PDF; 490&nbsp;kB).'' Berlin 2005.</ref> Zahlreiche Webseiten und Online-Anbieter bieten frei zugängliche oder kommerzielle Nachbildungen von zum Teil prominenten Stimmen fiktiver oder realer Vorlagen an, um individualisierte Audiodateien zu erstellen.
*[http://www.cs.indiana.edu/rhythmsp/ASA/Contents.html Dennis Klatt's History of Speech Synthesis]

*[http://www.acoustics.hut.fi/~slemmett/dippa/chap2.html History and Development of Speech Synthesis (Helsinki University of Technology)]
== Synthese ==
Sprachsynthese setzt eine Analyse der menschlichen Sprache voraus, bezüglich der [[Phonem]]e, aber auch der Prosodie, weil eben ein Satz allein durch die Satzmelodie unterschiedliche Bedeutungen haben kann.

Was den Syntheseprozess an sich betrifft, gibt es verschiedene Methoden. Gemeinsam ist allen Methoden, dass sie auf eine Datenbank zurückgreifen, in der charakteristische Informationen über Sprachsegmente hinterlegt sind. Elemente aus diesem Inventar werden zur gewünschten Äußerung verknüpft. Sprachsynthesesysteme lassen sich anhand des Inventars der Datenbank und insbesondere der Methode zur Verknüpfung klassifizieren. Tendenziell fällt die Signalsynthese umso einfacher aus, je größer die Datenbank ist, da diese dann bereits Elemente enthält, die der gewünschten Äußerung näher sind und weniger Signalbearbeitung notwendig ist. Aus dem gleichen Grund gelingt bei einer großen Datenbank meistens eine natürlicher klingende Synthese.

Eine Schwierigkeit der Synthese liegt in dem Aneinanderfügen von Inventarelementen. Da diese aus verschiedenen Äußerungen stammen, unterscheiden sie sich auch in der Lautstärke, der Grundfrequenz und der Lage der Formanten. Bei einer Vorverarbeitung der Datenbank oder beim Verbinden der Inventarelemente müssen diese Unterschiede möglichst gut ausgeglichen werden [[Normalisierung (Audio)|(Normalisierung)]], um nicht die Qualität der Synthese zu beeinträchtigen.

=== Unit Selection ===
Die Unit Selection liefert die beste Qualität besonders bei einer eingeschränkten [[Definitionsmenge|Domäne]]. Die Synthese verwendet eine große Sprachdatenbank, in der jede aufgenommene Äußerung in einige oder alle der folgenden Einheiten segmentiert wird:
* [[Phonem]]e / [[Diphon]]e,
* [[Silbe]]n,
* [[Morphem]]e,
* [[Wort|Wörter]],
* [[Phrase (Linguistik)|Phrasen]],
* [[Satz (Grammatik)|Sätze]].
Diese Segmente werden mit einem Verzeichnis von einer Reihe akustischer und phonetischer Eigenschaften wie Grundfrequenzverlauf, Dauer oder Nachbarn gespeichert.

Für die Synthese werden durch spezielle [[Suchalgorithmus|Suchalgorithmen]], gewichtete [[Entscheidungsbaum|Entscheidungsbäume]], eine Reihe von möglichst großen Segmenten bestimmt, die der zu synthetisierenden Äußerung hinsichtlich dieser Eigenschaften möglichst nahekommen. Da diese Reihe ohne oder mit wenig Signalverarbeitung ausgegeben wird, bleibt die Natürlichkeit der gesprochenen Sprache erhalten, solange wenige Verkettungsstellen erforderlich sind.

==== Diphonsynthese ====
Anfang des 21. Jahrhunderts durchgeführte Experimente haben gezeigt, dass die korrekte Wiedergabe der Lautübergänge wesentlich für die Verständlichkeit der Sprachsynthese ist.
Um alle Lautübergänge zu speichern, wird eine Datenbasis mit etwa 2500 Einträgen verwendet. Darin ist jeweils der Zeitbereich des stationären Teils, die Phonemmitte eines Phonems, bis zum stationären Teil des folgenden Phonems abgespeichert. Für die Synthese werden die Informationen entsprechend zusammengefügt ([[Konkatenation (Wort)|konkateniert]]).

Weitere [[Koartikulation]]seffekte, die viel zur Natürlichkeit der Sprache beitragen, können durch umfangreichere Datenbasen berücksichtigt werden. Ein Beispiel dafür ist [[Hadifix]], das <u>Ha</u>lbsilben, <u>Di</u>phone und Suf<u>fix</u>e enthält.

=== Signalerzeugung ===
Die Signalerzeugung gibt die gewünschten Segmente aus der Datenbank mit dem vorgegebenen Grundfrequenzverlauf wieder. Diese Ausprägung des Grundfrequenzverlaufs kann auf verschiedene Arten geschehen, worin sich die folgenden Verfahren unterscheiden.

==== Quelle-Filter-Modell ====
Bei Synthesen, die eine Quelle-Filter-Separation verwenden, wird eine Signalquelle mit periodischer Signalform verwendet. Deren Periodenlänge wird passend zur Grundfrequenz der zu synthetisierenden Äußerung eingestellt. Dieser Anregung wird je nach Phonemtyp zusätzlich Rauschen beigemischt. Die abschließende Filterung prägt die lautcharakteristischen Spektren auf. Vorteilhaft bei dieser Klasse von Verfahren ist die einfache Grundfrequenzsteuerung der Quelle. Ein Nachteil ergibt sich durch die in der Datenbank gespeicherten Filterparameter, deren Bestimmung aus Sprachproben schwierig ist. Je nach Art des Filters bzw. der zugrunde liegenden Sichtweise des Sprechens unterscheidet man die folgenden Verfahren:

===== Formantsynthese =====
Die Formantsynthese beruht auf der Beobachtung, dass es zur Unterscheidung der Vokale genügt, die ersten zwei [[Formant]]en treffend zu reproduzieren. Jeder Formant wird durch einen in der [[Mittenfrequenz]] und [[Güte]] steuerbaren [[Bandpass]], ein Polfilter 2.&nbsp;Ordnung, nachgebildet. Die Formantsynthese ist durch analoge elektronische Schaltungen vergleichsweise einfach realisierbar.

===== Akustisches Modell =====
Das akustische Modell bildet die gesamten Resonanzeigenschaften des [[Vokaltrakt]]s durch einen geeigneten Filter nach. Häufig wird der Vokaltrakt dazu vereinfacht als Rohr variablen Querschnitts betrachtet, wobei Quermoden vernachlässigt werden, da die seitliche Ausdehnung des Vokaltrakts klein ist. Die Querschnittsänderungen werden weiterhin durch äquidistante Querschnittssprünge approximiert. Ein häufig gewählter Filtertyp ist der [[Kreuzgliedketten-Filter]], bei dem eine direkte Beziehung zwischen Querschnitt und Filterkoeffizient besteht.<ref>Karl Schnell: ''[http://d-nb.info/969684908/34 Rohrmodelle des Sprechtraktes.]'' Frankfurt 2003.</ref>

Diese Filter sind eng verwandt mit dem [[Linear Predictive Coding]] (LPC), das ebenfalls für Sprachsynthesen eingesetzt wird. Bei dem LPC werden ebenfalls die gesamten Resonanzeigenschaften berücksichtigt, es besteht jedoch kein direkter Zusammenhang zwischen Filterkoeffizienten und Querschnittsverlauf des Vokaltrakts.

===== Artikulatorische Synthese =====
Die artikulatorische Synthese stellt gegenüber dem akustischen Modell eine Beziehung zwischen der [[Artikulation (Linguistik)#Phonation im Artikulationsprozess|Stellung der Artikulatoren]] und dem daraus resultierenden Querschnittsverlauf des Vokaltrakts her. Hier kommen zur Nachbildung der Resonanzcharakteristik neben zeitdiskreten Kreuzgliedkettenfiltern auch Lösungen der zeitkontinuierlichen Horngleichung zum Einsatz, aus denen das Zeitsignal durch [[Fouriertransformation]] gewonnen wird.

==== Overlap Add ====
Pitch Synchronous Overlap Add, abgekürzt PSOLA, ist ein Syntheseverfahren, bei dem sich in der Datenbank Aufzeichnungen des Sprachsignals befinden. Sofern es sich um periodische Signale handelt, sind diese mit einer Information über die Grundfrequenz (Pitch) versehen und der Anfang jeder Periode ist markiert. Bei der Synthese werden diese Perioden mit einem bestimmten Umfeld mittels einer [[Fensterfunktion]] ausgeschnitten und dem zu synthetisierenden Signal an passender Stelle hinzuaddiert: Je nachdem ob die gewünschte Grundfrequenz höher oder tiefer liegt als die des Datenbankeintrags, werden sie entsprechend dichter oder weniger dicht als in dem Original zusammengefügt. Zur Anpassung der Lautdauer können Perioden entfallen oder doppelt ausgegeben werden. Dieses Verfahren wird auch als TD-PSOLA oder PSOLA-TD (TM) bezeichnet, wobei TD für Time Domain steht und hervorhebt, dass die Verfahren im Zeitbereich arbeiten.

Eine Weiterentwicklung ist das Multi Band Resynthesis OverLap Add – Verfahren, kurz [[MBROLA]]. Hier werden die Segmente in der Datenbank durch eine Vorverarbeitung auf eine einheitliche Grundfrequenz gebracht und Phasenlage der Harmonischen wird normalisiert. Dadurch entstehen bei der Synthese eines Übergangs von einem Segment auf das nächste weniger perzeptiv wahrnehmbare Störungen und die erzielte Sprachqualität ist höher.

Diese Syntheseverfahren sind mit der [[Granularsynthese]] verwandt, die in Klangerzeugung und -verfremdung bei elektronischer Musikproduktion zum Einsatz kommt.

==== Parametrische Sprachsynthese aus Hidden-Markov-Modellen (HMM) und/oder stochastischen Markov-Graphen (SMG) ====
Die parametrische Sprachsynthese ist eine Gruppe von Verfahren, welche auf stochastischen Modellen basieren. Bei diesen Modellen handelt es sich entweder um [[Hidden Markov Model|Hidden Markov Modelle (HMM)]], um stochastische Markov-Graphen (SMG), oder neuerdings auch um eine Kombination dieser beiden. Grundprinzip ist, dass die aus einer Textvorverarbeitung gewonnenen, symbolischen Phonemfolgen eine statistische Modellierung durchlaufen, indem sie zunächst in Segmente zerlegt und jedem dieser Segmente sodann ein bestimmtes Modell aus einer bestehenden Datenbasis zugeordnet wird. Jedes dieser Modelle wiederum wird durch eine Reihe von ''Parametern'' beschrieben und schließlich mit den anderen Modellen verkettet. Die Verarbeitung zu einem künstlichen Sprachsignal, das sich an den besagten Parametern orientiert, schließt die Synthese dann ab. Im Falle der Verwendung flexiblerer, stochastischer Markov-Graphen, lässt sich ein solches Modell sogar insofern optimieren, als dass ihm vorab und mittels Zuführung von Beispielen natürlicher Sprache eine gewisse Grundnatürlichkeit antrainiert werden kann. Statistische Verfahren dieser Art entstammen dem konträren Bereich der [[Spracherkennung]] und motivieren sich durch Erkenntnisse über den Zusammenhang zwischen der Wahrscheinlichkeit einer bestimmten, gesprochenen Wortfolge und der dann zu erwartenden, ungefähren Sprechgeschwindigkeit, oder ihrer Prosodie.<ref>{{Patent| Land=DE| V-Nr=10040991C1| Titel=Verfahren zur parametrischen Synthese von Sprache| A-Datum=2000-08-18| V-Datum=2001-09-27| Anmelder=Technische Universität Dresden| Erfinder=Matthias Eichner, Matthias Wolf}}</ref><ref>{{Webarchiv|url=http://www.ims.uni-stuttgart.de/lehre/studentenarbeiten/fertig/Diplomarbeit_Breitenbuecher.ps.gz |wayback=20120124181856 |text=Diplomarbeit_Breitenbuecher |archiv-bot=2023-01-13 00:57:02 InternetArchiveBot }}</ref><ref>{{Webarchiv|url=http://www.ias.et.tu-dresden.de/ias/index.php?id=443 |wayback=20140721012516 |text=Archivierte Kopie}}</ref>

== Einsatzmöglichkeiten von Text-to-Speech-Software ==
Die Nutzung von Sprachsynthese-Software muss kein Selbstzweck sein. Menschen mit Sehbehinderungen – z.&nbsp;B. [[Grauer Star|Grauem Star]] oder altersbedingter [[Makuladegeneration]] – nutzen TTS-Softwarelösungen, um sich Texte direkt am Bildschirm vorlesen zu lassen. [[Blindheit|Blinde]] Menschen können einen Computer mittels einer [[Screenreader]]-Software bedienen und bekommen Bedienelemente und Textinhalte angesagt. Aber auch Dozenten nutzen die Sprachsynthese für die Aufzeichnung von Vorträgen. Ebenso nutzen Autoren TTS-Software, um selbst geschriebene Texte auf Fehler und Verständlichkeit hin zu prüfen.

Ein weiteres Einsatzgebiet findet sich in Form von Software, die das Erzeugen von [[MP3|MP3-Dateien]] erlaubt. Hierdurch kann Sprachsynthese-Software für die Erzeugung einfacher [[Podcast]]s bzw. [[Audioblog]]s genutzt werden. Erfahrungsgemäß kann die Produktion von Podcasts bzw. Audioblogs sehr zeitintensiv sein.

Bei der Arbeit mit US-amerikanischer Software ist zu beachten, dass die vorhandenen Stimmen von unterschiedlicher Güte sind. Englische Stimmen haben eine höhere Qualität als deutsche. Eine Ursache ist die reduzierte Verfügbarkeit größerer deutscher Sprachdatenbanken, welche als Grundlage für das Training eines künstlichen Modells erforderlich sind. Das deutschsprachige Projekt Thorsten-Voice<ref>{{Internetquelle |url=https://marjorie-wiki.de/wiki/Thorsten-Voice |titel=Thorsten-Voice - Enzyklopädie Marjorie-Wiki |sprache=de |abruf=2024-09-15}}</ref> versucht diese Lücke zu schließen. Eine 1:1-Kopie der Texte in eine TTS-Software kann nicht empfohlen werden, eine Nachbearbeitung ist in jedem Fall nötig. Dabei geht es nicht nur um das Ersetzen von Abkürzungen und Zahlen in geschriebenen Text, auch das Einfügen von Satzzeichen – auch wenn diese grammatikalisch nicht korrekt sind – kann helfen, um auf das Satztempo Einfluss zu nehmen. Deutsche „Übersetzungen“ mit Anglizismen stellen für die Sprachsynthese i. d. R. ein unüberwindbares Problem dar.

Häufige Anwendungen sind Ansagen in Telefon- und in Navigationssystemen und automatische Haltestellenansagen in Verkehrsmitteln.


== Sprachsynthese-Software ==
== Sprachsynthese-Software ==
[[Datei:SoftVoice.svg|mini|Amiga SoftVoice Sprachsynthese]]
*[[DeskBot]]

*Festival
* AnalogX SayIt
*Festvox
* Aristech
*[[FreeTTS]]
* Audiodizer
*[[Hadifix]]
* Balabolka (Freeware, 26 Sprachen, [[Speech Application Programming Interface|SAPI4 und SAPI5]])
*Realspeak von Nuance (ehem. ScanSoft)
* BOSS, entwickelt am Institut für Kommunikationswissenschaften der [[Rheinische Friedrich-Wilhelms-Universität Bonn|Universität Bonn]]
*SVOX
* Browsealoud von textHELP
*Loquendo TTS
* Cepstral Text-to-Speech
*MBROLA
* CereProc
*ReadSpeaker: Webseiten vorlesen und Podcasting
* Coqui AI<ref>Homepage Coqui AI - https://coqui.ai</ref><ref>{{Internetquelle |url=https://github.com/coqui-ai |titel=coqui |werk=[[GitHub]] |sprache=en |abruf=2024-03-01}}</ref>
*VoiceReader
* DeskBot
*Webspeech
* [[eSpeak NG|espeak]] (Open Source, viele Sprachen, SAPI5)
**fürs Deutsche: Txt2pho, Loquendo TTS, Virtual Voice, McLoud
* [[Festival (Software)|Festival]]
* Festvox
* [[FreeTTS]] (Open Source)
* GhostReader
* Gnuspeech
* Infovox
* IVONA Text-to-Speech
* [[Linguatec]] Voice Reader 15
* Logox Clipreader
* Loquendo TTS
* MacinTalk und narrator.device von SoftVoice
* MARY Text-To-Speech entwickelt vom DFKI Language Technology Lab
* MBROLA<ref>{{Internetquelle |url=https://github.com/numediart/MBROLA |titel=Welcome to MBROLA project |werk=[[GitHub]] |hrsg=UMONS Institute for Creative Technologies |datum=2022-01-30 |sprache=en |abruf=2022-01-30}}</ref> unterschiedliche Stimmen (fertigen Phoneme) in verschiedenen Sprachen, die von Sprachsynthesesoftware wie eSpeak oder Festival benutzt werden können.<ref>{{Internetquelle |url=https://wiki.ubuntuusers.de/Sprachausgabe/ |titel=Sprachausgabe |werk=Wiki.ubuntuusers.de |abruf=2022-01-30}}</ref>
* Modulate<ref>{{Internetquelle |url=https://modulate.ai/ |titel=Modulate: Unlock your voice |zugriff=2019-03-14}}</ref> Software zur Stimmkonversion, benutzt [[Generative Adversarial Networks]]<ref>{{Internetquelle |autor=Technology Review |url=https://www.heise.de/tr/artikel/Sprechen-wie-Barack-Obama-4333339.html |titel=Sprechen wie Barack Obama |werk= |hrsg= |datum=2019-03-14 |zugriff=2019-03-14 |sprache=de}}</ref>
* [[Mozilla]] TTS<ref>{{Internetquelle |url=https://github.com/mozilla/TTS |titel=mozilla/TTS |hrsg=Mozilla |datum=2021-02-07 |abruf=2021-02-07}}</ref>
* [[MWS Reader]] Sprachausgabe
* NaturalReader von NaturalSoft
* OnScreenVoices von tom weber software
* Parler TTS<ref>{{Internetquelle |url=https://github.com/huggingface/parler-tts/ |titel=huggingface/parler-tts |hrsg=Hugging Face |datum=2024-09-15 |abruf=2024-09-15}}</ref> von Huggingface
* Piper TTS<ref>{{Internetquelle |url=https://github.com/rhasspy/piper |titel=rhasspy/piper |hrsg=Rhasspy |datum=2024-09-15 |abruf=2024-09-15}}</ref>
* ReadSpeaker: Webseiten vorlesen und Podcasting
* Realspeak von Nuance (ehem. ScanSoft), jetzt Kobaspeech 3
* SAM von Don’t Ask Software<ref>https://simulationcorner.net/index.php?page=sam</ref>
* SpeechConcept
* Sprechomat
* libttspico-utils von SVOX (Kommandozeilen gesteuerte Sprachsynthese in Deutsch, Englisch (GB und US), Spanisch, Französisch und Italienisch)<ref>[https://packages.debian.org/buster/libttspico-utils libttspico-utils - Paketbeschreibung bei Debian]</ref>
* Synte 2 wurde ab 1977 durch Raimo O. Toivonen entwickelt. Ihm ging das Forschungsprojekt VAMKOM voraus, {{FiS|Vammaisten kommunikaatiovälineiden kehittäminen|de=Entwicklung von Kommunikationsgeräten für Behinderte}}. Es lief in Tampere in den Jahren 1975–1978 und war der Beginn der finnischen mikroprozessorgestützten Sprachtechnologie. <!-- https://fi.wikipedia.org/wiki/Synte_2 -->
* Synte 3 war ein Formanten-Sprachsynthesizer. Er wurde in einem kommerziellen Projekt in den Jahren 1980–1981 zunächst am Fachbereich für Elektronik der [[Technische Universität Tampere|Technischen Universität Tampere]] entwickelt. Es wurde unter den Assistenzprofessoren Matti A. Karjalainen, Unto K. Laine und Raimo O. Toivonen entwickelt.<!-- https://fi.wikipedia.org/wiki/Synte_3 -->
* SPL1 Forschungs-Sprachsynthesizer ({{FiS|SPL1-tutkimuspuhesyntetisaattori}}) wurde von 1981 bis 1983 in Tampere für den akademischen Gebrauch entwickelt. Er basierte auf der kommerziellen PARCAS-Soundkarte von Euroka Oy und der Vocom SPS2-Sprachanalyse-Hardware. Der SPL1 wurde von Grund auf neu programmiert und fand in der Forschung bis Mitte der 1980er Jahre Anwendung. <!-- https://fi.wikipedia.org/wiki/SPL1-tutkimuspuhesyntetisaattori -->
<!-- https://fi.wikipedia.org/wiki/SPL1-tutkimuspuhesyntetisaattori -->
* SYNVO
* Tacotron (Google)<ref>{{Internetquelle |autor=Sebastian Grüner |url=https://www.golem.de/news/tacotron-2-googles-sprachsynthese-erreicht-fast-menschliche-qualitaet-1712-131817.html |titel=Tacotron 2: Googles Sprachsynthese erreicht fast menschliche Qualität - Golem.de |werk=golem.de |hrsg= |datum=2017-12-21 |zugriff=2019-03-14 |sprache=de}}</ref>
* Text Aloud MP3
* [https://marjorie-wiki.de/wiki/Thorsten-Voice Thorsten-Voice]
* Toshiba ToSpeak
* TTS Robot
* virsyn CANTOR Vokalsynthese
* Virtual Voice


== Sprachsynthese-Hardware ==
== Sprachsynthese-Hardware ==
* Votrax
* Votrax
** SC-01A (analog formant)
** SC-01A (analog formant)
** SC-02 / SSI-263 / "Artic 263"
** SC-02 / SSI-263 / „Arctic 263“
* General Instruments SP0256-AL2 (CTS256A-AL2)
* [[General Instrument]] Speech Processor
** SP0250
* National Semiconductor DT1050 Digitalker (Mozer)
** SP0256-AL2 „Orator“ (CTS256A-AL2)
** SP0264
** SP1000
* Mullard MEA8000<ref>http://vesta.homelinux.free.fr/wiki/le_synthetiseur_vocal_mea_8000.html</ref>
* National Semiconductor DT1050 Digitalker (Mozer)
* Silicon Systems SSI 263 (analog formant)
* Silicon Systems SSI 263 (analog formant)
* Texas Instruments
* Texas Instruments
** TMS5110A (LPC)
** [[Texas Instruments LPC-Sprachchips|TMS5110A (LPC)]]
** TMS5200
** [[Texas Instruments LPC-Sprachchips|TMS5200]]
* [[Oki Denki Kōgyō|Oki]] Semiconductor
* Oki Semiconductor MSM5218RS (ADPCM)
** MSM5205

** MSM5218RS (ADPCM)
== Literatur ==
* Toshiba T6721A C²MOS Voice Synthesizing LSI

*Karlheinz Stöber, Bernhard Schröder, Wolfgang Hess: ''Vom Text zur gesprochenen Sprache''. In: Lobin, Henning / Lemnitzer, Lothar (Hrsg.): ''Texttechnologie. Perspektiven und Anwendungen.'' Tübingen: Stauffenburg 2004, S. 295-325. ISBN 3860572873


== Siehe auch ==
== Siehe auch ==
* [[Spracherkennung]]
* [[Prosodieerkennung]]
* [[Stimmverschlüsselung]]
* [[Sprachdialogsystem]]
* [[Phonetik]]
* [[Intonation (Phonetik)]]


== Literatur ==
*[[Spracherkennung]]
* Karlheinz Stöber, Bernhard Schröder, Wolfgang Hess: ''Vom Text zur gesprochenen Sprache.'' In: [[Henning Lobin]], [[Lothar Lemnitzer]] (Hrsg.): ''Texttechnologie. Perspektiven und Anwendungen.'' Stauffenburg, Tübingen 2004, ISBN 3-86057-287-3, S. 295–325.
*[[Voice Portal]]
* Jessica Riskin: ''Eighteenth-Century Wetware.'' In: ''Representations.'' Bd. 83, Nr. 1, 2003, {{ISSN|0734-6018}}, S. 97–125, {{doi|10.1525/rep.2003.83.1.97}}.
*[[SAPI]]
* James L. Flanagan: ''Speech Analysis, Synthesis and Perception'' (= ''Kommunikation und Kybernetik in Einzeldarstellungen.'' Bd. 3). 2nd edition. Springer, Berlin u. a. 1972, ISBN 3-540-05561-4. 1. Aufl. 1965, 3. Aufl. 2008<ref>[http://citeseerx.ist.psu.edu/viewdoc/download;jsessionid=E8DD9C1F5434F55F86BE0CEFC6BEA40F?doi=10.1.1.490.6903&rep=rep1&type=pdf Speech Analysis Synthesis and Perception] (pdf)</ref>
*[[Phonetik]]
* Ville Pulkki, [[Matti Antero Karjalainen|Matti Karjalainen]]: ''Communication Acoustics: An Introduction to Speech, Audio and Psychoacoustics.'' John Wiley & Sons, 2015, ISBN 978-1-118-86654-2.
*[[Voder]]
*[[Vocoder]]
*[[Formant]]
*[[Diphon]]
*[[Stimmverschlüsselung]]
*[[Prosodie]]
*[[Intonation (Phonetik)]]
*[[Baron Wolfgang von Kempelen]]


== Weblinks ==
== Weblinks ==
{{Wiktionary|Sprachsynthese}}
{{Commonscat|Speech synthesis|Sprachsynthese}}
'''Geschichte'''
* [http://waste.informatik.hu-berlin.de/Diplom/studienarbeit_hoxbergen.pdf ''Geschichte der Sprachsynthese anhand von Beispielen.''] Studienarbeit (PDF; 480&nbsp;kB).
* [http://www.stefan-uhlmann.de/cbm/MVM/index.html Magic Voice Speech Module] für den C64

'''Systeme'''
* {{INCOBS|vorlesesysteme|Vorlesesystemen}}
* {{INCOBS|screenreader|Screenreader}}
* [http://ttssamples.syntheticspeech.de/deutsch/index.html Liste von Sprachsynthesesystemen mit Beispielen]

'''Webinterfaces'''
<!--auch hier gilt: ein Beispiel reicht eigentlich! -->
* [http://www.pediaphon.org/~bischoff/radiopedia/ Pediaphon] – Sprachausgabe für deutschsprachige Wikipedia-Artikel
* [https://www.dfki.de/web/forschung/projekte-publikationen/projekt/mary/ Mary] – Text-to-Speech-Sprachsynthese-Programmes MARY vom [[Deutsches Forschungszentrum für Künstliche Intelligenz|DFKI]] <!-- Link geht, aber die Online-Demo nicht. -Alex42 -->
* [http://texttospeechrobot.com/tts/de/text-in-sprache/ Online-Demo „Text zu Sprache“] im Browser via Betriebssystem


== Fußnoten ==
* [http://ttssamples.syntheticspeech.de/deutsch/index.html Ausführliche Liste von Sprachsynthesesystemen mit Beispielen]
<references />
* [http://www.ikp.uni-bonn.de/dt/forsch/phonetik/hadifix/HADIFIXforMBROLA.html Txt2Pho] - wandelt deutschsprachige Texte in Phonemrepräsentation
* [http://tcts.fpms.ac.be/synthesis/mbrola.html MBrola] - Projekt zur Synthese von Sprache
* [http://freetts.sourceforge.net/docs/index.php FreeTTS] - ein in Java implementiertes, quelloffenes TTS-System (Text-To-Speech)
* [http://festvox.org/index.html Festvox] - ein Open Source Projekt zur Sprachsynthese
* [http://www.deruwe.de/sprich.html Ein webbasierender TTS Service]
* [http://mary.dfki.de MARY] - ein Open Source TTS System für deutsch, englisch, tibetisch
* [http://prt-i61.fernuni-hagen.de/~bischoff/radiopedia/ Pediaphon] - eine Sprachausgabe für deutschsprachige Wikipedia-Artikel


[[Kategorie:Computerlinguistik]]
[[Kategorie:Computerlinguistik]]
[[Kategorie:Phonetik]]
[[Kategorie:Phonetik]]
[[Kategorie:Sprache]]
[[Kategorie:Sprach-Interaktion]]
[[Kategorie:Sprach-Interaktion]]
[[Kategorie:Tontechnik]]
[[Kategorie:Klangsynthese]]
[[da:Talesyntese]]
[[en:Speech synthesis]]
[[eo:Parolsintezo]]
[[es:Síntesis de voz]]
[[eu:Hizketaren sintesia]]
[[fa:متن به صدا]]
[[fi:Puhesynteesi]]
[[fr:Synthèse vocale]]
[[hu:Beszédszintézis]]
[[it:Sintesi vocale]]
[[ja:音声合成]]
[[ms:Lafal buatan]]
[[nl:Spraaksynthese]]
[[nn:Talesyntese]]
[[pl:Synteza mowy]]
[[ru:Синтез речи]]
[[sv:Talsyntes]]
[[zh:语音合成]]

Aktuelle Version vom 30. Mai 2025, 03:08 Uhr

Schema für den „Vocoder“ von Homer Dudley (1940)

Unter Sprachsynthese versteht man die künstliche Erzeugung der menschlichen Sprechstimme. Durch Text-to-Speech (TTS) (oder Vorleseautomat) wird Fließtext in eine akustische Sprachausgabe überführt.

Genügend Rechenleistung vorausgesetzt, verwendet man heute sog. Tiefe Neuronale Netze (DNN), die man mit vielen Stunden hochwertiger Sprachaufnahme anlernt, englisch Deep learning speech synthesis.

Bis Mitte der 2010er-Jahre verwendete man den analytischen Ansatz. Dabei wird der Text über mehrere Zwischenstufen zu Sprache gewandelt, diese sind meist: Eingangstext, Lautschrift, Phoneme, Aneinanderstellung von aufgenommenen oder synthetisierten Diphonen. Ein besonderes Problem ist die Erzeugung einer natürlichen Sprachmelodie (Prosodie).

Die Herkunft der Diphone unterscheidet grundsätzlich zwischen zwei Methoden. Das Signal kann durch die sogenannte physiologische (artikulatorische) Modellierung vollständig im Rechner erzeugt werden. Oder aber es wird auf Sprachaufnahmen (Samples) zurückgegriffen, was teilweise auch als Signalmodellierung bezeichnet wird.

Während die geschichtlich ersten Systeme auf Formantsynthesen beruhten, basierten die bisher industriell eingesetzten Systeme vorwiegend auf Signalmodellierung.

Geschichte

[Bearbeiten | Quelltext bearbeiten]
Nachbau der „Sprechmaschine“ von Wolfgang von Kempelen (2009)
Nachbau der Konstruktion von Hermann von Helmholtz (1865)
Demonstration des „Voders“ 1939

Schon lange vor der Erfindung der elektronischen Signalverarbeitung versuchten Wissenschaftler Maschinen zu konstruieren, die menschliche Sprache erzeugen können. Gerbert von Aurillac (1003) wird ein aus Bronze gefertigter „Sprechender Kopf“ zugeschrieben, von dem berichtet wurde, dass er „ja“ und „nein“ sagen konnte. Wohl eher in den Bereich der Legenden gehören die Apparate von Albertus Magnus (1198–1280) und Roger Bacon (1214–1294).

Der deutsche, in Kopenhagen tätige Wissenschaftler Christian Kratzenstein baute 1779 aufgrund eines Preisausschreibens der St. Petersburger Akademie eine „Sprachorgel“, die durch freischwingende Lingualpfeifen mit dem menschlichen Vokaltrakt nachgebildeten Resonatoren fünf lange Vokale (a, e, i, o und u) synthetisieren konnte. Wolfgang von Kempelen entwickelte bereits seit ca. 1760 eine Sprechmaschine, die er 1791 in seiner Veröffentlichung „Mechanismus der menschlichen Sprache nebst der Beschreibung seiner sprechenden Maschine“ darstellte. Diese Synthese basierte wie Kratzensteins auf einem Blasebalg als Lungenäquivalent, die eigentliche Anregung geschah aber erheblich anatomienäher durch eine einzelne, aufschlagende Lingualpfeife. Damit waren einige Vokale und auch Plosive möglich. Darüber hinaus ließen sich über verschiedene Mechanismen einige Frikative darstellen. An den Stimmbändern schloss ein Ledertubus an, der durch eine Hand verformt werden konnte, und so die variable Geometrie und Resonanzverhalten des Vokaltrakts nachbildete. Von Kempelen schrieb:

„in einer Zeit von drei Wochen eine bewundernswerte Fertigkeit im Spielen erlangen, besonders wenn man sich auf die lateinische, französische oder italienische Sprache verlegt, denn die deutsche ist [aufgrund der häufigen Konsonantenbündel] um vieles schwerer.“

Charles Wheatstone baute 1837 eine Speaking Machine, die auf diesem Entwurf beruht, ein Nachbau findet sich im Deutschen Museum. 1857 baute Joseph Faber die Euphonia, die ebenso diesem Prinzip folgt.

Ende des 19. Jahrhunderts entwickelte sich das Interesse weg vom Nachbau menschlicher Sprachorgane (genetische Sprachsynthese), hin zur Simulation des akustischen Raumes (gennematische Sprachsynthese). So synthetisierte Hermann von Helmholtz erstmals Vokale mit Hilfe von Stimmgabeln, die auf die Resonanzfrequenzen des Vokaltraktes in bestimmten Vokalstellungen abgestimmt waren. Diese Resonanzfrequenzen werden als Formanten bezeichnet. Sprachsynthese durch Kombination von Formanten war technischer Mainstream bis in die Mitte der 1990er Jahre.

In den Bell Labs wurde in den 1930ern der Vocoder, ein tastaturgesteuerter elektronischer Sprachsynthesizer entwickelt, über den gesagt wurde, dass er klar verständlich war. Homer Dudley verbesserte diese Maschine zum Voder, der in der Weltausstellung 1939 präsentiert wurde. Der Voder benutzte elektrische Oszillatoren zur Erzeugung der Formantfrequenzen.

Die ersten computerbasierten Sprachsynthesesysteme wurden in den späten 1950ern entwickelt, das erste komplette Text-To-Speech-System 1968 fertiggestellt. Der Physiker John Larry Kelly, Jr und die Informatikerin Carol Lochbaum entwickelten 1961 bei den Bell Labs eine Sprachsynthese mit einem IBM 704 und ließen ihn das Lied Daisy Bell singen. Der Regisseur Stanley Kubrick war davon so beeindruckt, dass er es in den Film 2001: A Space Odyssey integrierte.

Gegenwart

[Bearbeiten | Quelltext bearbeiten]

Während frühe elektronische Sprachsynthesen noch sehr roboterhaft klangen und teilweise schwer verständlich waren, erreichen sie etwa seit der Jahrtausendwende eine Qualität, bei der es mitunter schwierig ist, sie von menschlichen Sprechern zu unterscheiden. Das ist hauptsächlich der Tatsache zu verdanken, dass sich die Technologie von der eigentlichen Synthese des Sprachsignals abgewandt hat und sich darauf konzentriert, aufgenommene Sprachsegmente optimal zu verketten.[1][2][3] Zahlreiche Webseiten und Online-Anbieter bieten frei zugängliche oder kommerzielle Nachbildungen von zum Teil prominenten Stimmen fiktiver oder realer Vorlagen an, um individualisierte Audiodateien zu erstellen.

Synthese

[Bearbeiten | Quelltext bearbeiten]

Sprachsynthese setzt eine Analyse der menschlichen Sprache voraus, bezüglich der Phoneme, aber auch der Prosodie, weil eben ein Satz allein durch die Satzmelodie unterschiedliche Bedeutungen haben kann.

Was den Syntheseprozess an sich betrifft, gibt es verschiedene Methoden. Gemeinsam ist allen Methoden, dass sie auf eine Datenbank zurückgreifen, in der charakteristische Informationen über Sprachsegmente hinterlegt sind. Elemente aus diesem Inventar werden zur gewünschten Äußerung verknüpft. Sprachsynthesesysteme lassen sich anhand des Inventars der Datenbank und insbesondere der Methode zur Verknüpfung klassifizieren. Tendenziell fällt die Signalsynthese umso einfacher aus, je größer die Datenbank ist, da diese dann bereits Elemente enthält, die der gewünschten Äußerung näher sind und weniger Signalbearbeitung notwendig ist. Aus dem gleichen Grund gelingt bei einer großen Datenbank meistens eine natürlicher klingende Synthese.

Eine Schwierigkeit der Synthese liegt in dem Aneinanderfügen von Inventarelementen. Da diese aus verschiedenen Äußerungen stammen, unterscheiden sie sich auch in der Lautstärke, der Grundfrequenz und der Lage der Formanten. Bei einer Vorverarbeitung der Datenbank oder beim Verbinden der Inventarelemente müssen diese Unterschiede möglichst gut ausgeglichen werden (Normalisierung), um nicht die Qualität der Synthese zu beeinträchtigen.

Unit Selection

[Bearbeiten | Quelltext bearbeiten]

Die Unit Selection liefert die beste Qualität besonders bei einer eingeschränkten Domäne. Die Synthese verwendet eine große Sprachdatenbank, in der jede aufgenommene Äußerung in einige oder alle der folgenden Einheiten segmentiert wird:

Diese Segmente werden mit einem Verzeichnis von einer Reihe akustischer und phonetischer Eigenschaften wie Grundfrequenzverlauf, Dauer oder Nachbarn gespeichert.

Für die Synthese werden durch spezielle Suchalgorithmen, gewichtete Entscheidungsbäume, eine Reihe von möglichst großen Segmenten bestimmt, die der zu synthetisierenden Äußerung hinsichtlich dieser Eigenschaften möglichst nahekommen. Da diese Reihe ohne oder mit wenig Signalverarbeitung ausgegeben wird, bleibt die Natürlichkeit der gesprochenen Sprache erhalten, solange wenige Verkettungsstellen erforderlich sind.

Diphonsynthese

[Bearbeiten | Quelltext bearbeiten]

Anfang des 21. Jahrhunderts durchgeführte Experimente haben gezeigt, dass die korrekte Wiedergabe der Lautübergänge wesentlich für die Verständlichkeit der Sprachsynthese ist. Um alle Lautübergänge zu speichern, wird eine Datenbasis mit etwa 2500 Einträgen verwendet. Darin ist jeweils der Zeitbereich des stationären Teils, die Phonemmitte eines Phonems, bis zum stationären Teil des folgenden Phonems abgespeichert. Für die Synthese werden die Informationen entsprechend zusammengefügt (konkateniert).

Weitere Koartikulationseffekte, die viel zur Natürlichkeit der Sprache beitragen, können durch umfangreichere Datenbasen berücksichtigt werden. Ein Beispiel dafür ist Hadifix, das Halbsilben, Diphone und Suffixe enthält.

Signalerzeugung

[Bearbeiten | Quelltext bearbeiten]

Die Signalerzeugung gibt die gewünschten Segmente aus der Datenbank mit dem vorgegebenen Grundfrequenzverlauf wieder. Diese Ausprägung des Grundfrequenzverlaufs kann auf verschiedene Arten geschehen, worin sich die folgenden Verfahren unterscheiden.

Quelle-Filter-Modell

[Bearbeiten | Quelltext bearbeiten]

Bei Synthesen, die eine Quelle-Filter-Separation verwenden, wird eine Signalquelle mit periodischer Signalform verwendet. Deren Periodenlänge wird passend zur Grundfrequenz der zu synthetisierenden Äußerung eingestellt. Dieser Anregung wird je nach Phonemtyp zusätzlich Rauschen beigemischt. Die abschließende Filterung prägt die lautcharakteristischen Spektren auf. Vorteilhaft bei dieser Klasse von Verfahren ist die einfache Grundfrequenzsteuerung der Quelle. Ein Nachteil ergibt sich durch die in der Datenbank gespeicherten Filterparameter, deren Bestimmung aus Sprachproben schwierig ist. Je nach Art des Filters bzw. der zugrunde liegenden Sichtweise des Sprechens unterscheidet man die folgenden Verfahren:

Formantsynthese
[Bearbeiten | Quelltext bearbeiten]

Die Formantsynthese beruht auf der Beobachtung, dass es zur Unterscheidung der Vokale genügt, die ersten zwei Formanten treffend zu reproduzieren. Jeder Formant wird durch einen in der Mittenfrequenz und Güte steuerbaren Bandpass, ein Polfilter 2. Ordnung, nachgebildet. Die Formantsynthese ist durch analoge elektronische Schaltungen vergleichsweise einfach realisierbar.

Akustisches Modell
[Bearbeiten | Quelltext bearbeiten]

Das akustische Modell bildet die gesamten Resonanzeigenschaften des Vokaltrakts durch einen geeigneten Filter nach. Häufig wird der Vokaltrakt dazu vereinfacht als Rohr variablen Querschnitts betrachtet, wobei Quermoden vernachlässigt werden, da die seitliche Ausdehnung des Vokaltrakts klein ist. Die Querschnittsänderungen werden weiterhin durch äquidistante Querschnittssprünge approximiert. Ein häufig gewählter Filtertyp ist der Kreuzgliedketten-Filter, bei dem eine direkte Beziehung zwischen Querschnitt und Filterkoeffizient besteht.[4]

Diese Filter sind eng verwandt mit dem Linear Predictive Coding (LPC), das ebenfalls für Sprachsynthesen eingesetzt wird. Bei dem LPC werden ebenfalls die gesamten Resonanzeigenschaften berücksichtigt, es besteht jedoch kein direkter Zusammenhang zwischen Filterkoeffizienten und Querschnittsverlauf des Vokaltrakts.

Artikulatorische Synthese
[Bearbeiten | Quelltext bearbeiten]

Die artikulatorische Synthese stellt gegenüber dem akustischen Modell eine Beziehung zwischen der Stellung der Artikulatoren und dem daraus resultierenden Querschnittsverlauf des Vokaltrakts her. Hier kommen zur Nachbildung der Resonanzcharakteristik neben zeitdiskreten Kreuzgliedkettenfiltern auch Lösungen der zeitkontinuierlichen Horngleichung zum Einsatz, aus denen das Zeitsignal durch Fouriertransformation gewonnen wird.

Overlap Add

[Bearbeiten | Quelltext bearbeiten]

Pitch Synchronous Overlap Add, abgekürzt PSOLA, ist ein Syntheseverfahren, bei dem sich in der Datenbank Aufzeichnungen des Sprachsignals befinden. Sofern es sich um periodische Signale handelt, sind diese mit einer Information über die Grundfrequenz (Pitch) versehen und der Anfang jeder Periode ist markiert. Bei der Synthese werden diese Perioden mit einem bestimmten Umfeld mittels einer Fensterfunktion ausgeschnitten und dem zu synthetisierenden Signal an passender Stelle hinzuaddiert: Je nachdem ob die gewünschte Grundfrequenz höher oder tiefer liegt als die des Datenbankeintrags, werden sie entsprechend dichter oder weniger dicht als in dem Original zusammengefügt. Zur Anpassung der Lautdauer können Perioden entfallen oder doppelt ausgegeben werden. Dieses Verfahren wird auch als TD-PSOLA oder PSOLA-TD (TM) bezeichnet, wobei TD für Time Domain steht und hervorhebt, dass die Verfahren im Zeitbereich arbeiten.

Eine Weiterentwicklung ist das Multi Band Resynthesis OverLap Add – Verfahren, kurz MBROLA. Hier werden die Segmente in der Datenbank durch eine Vorverarbeitung auf eine einheitliche Grundfrequenz gebracht und Phasenlage der Harmonischen wird normalisiert. Dadurch entstehen bei der Synthese eines Übergangs von einem Segment auf das nächste weniger perzeptiv wahrnehmbare Störungen und die erzielte Sprachqualität ist höher.

Diese Syntheseverfahren sind mit der Granularsynthese verwandt, die in Klangerzeugung und -verfremdung bei elektronischer Musikproduktion zum Einsatz kommt.

Parametrische Sprachsynthese aus Hidden-Markov-Modellen (HMM) und/oder stochastischen Markov-Graphen (SMG)

[Bearbeiten | Quelltext bearbeiten]

Die parametrische Sprachsynthese ist eine Gruppe von Verfahren, welche auf stochastischen Modellen basieren. Bei diesen Modellen handelt es sich entweder um Hidden Markov Modelle (HMM), um stochastische Markov-Graphen (SMG), oder neuerdings auch um eine Kombination dieser beiden. Grundprinzip ist, dass die aus einer Textvorverarbeitung gewonnenen, symbolischen Phonemfolgen eine statistische Modellierung durchlaufen, indem sie zunächst in Segmente zerlegt und jedem dieser Segmente sodann ein bestimmtes Modell aus einer bestehenden Datenbasis zugeordnet wird. Jedes dieser Modelle wiederum wird durch eine Reihe von Parametern beschrieben und schließlich mit den anderen Modellen verkettet. Die Verarbeitung zu einem künstlichen Sprachsignal, das sich an den besagten Parametern orientiert, schließt die Synthese dann ab. Im Falle der Verwendung flexiblerer, stochastischer Markov-Graphen, lässt sich ein solches Modell sogar insofern optimieren, als dass ihm vorab und mittels Zuführung von Beispielen natürlicher Sprache eine gewisse Grundnatürlichkeit antrainiert werden kann. Statistische Verfahren dieser Art entstammen dem konträren Bereich der Spracherkennung und motivieren sich durch Erkenntnisse über den Zusammenhang zwischen der Wahrscheinlichkeit einer bestimmten, gesprochenen Wortfolge und der dann zu erwartenden, ungefähren Sprechgeschwindigkeit, oder ihrer Prosodie.[5][6][7]

Einsatzmöglichkeiten von Text-to-Speech-Software

[Bearbeiten | Quelltext bearbeiten]

Die Nutzung von Sprachsynthese-Software muss kein Selbstzweck sein. Menschen mit Sehbehinderungen – z. B. Grauem Star oder altersbedingter Makuladegeneration – nutzen TTS-Softwarelösungen, um sich Texte direkt am Bildschirm vorlesen zu lassen. Blinde Menschen können einen Computer mittels einer Screenreader-Software bedienen und bekommen Bedienelemente und Textinhalte angesagt. Aber auch Dozenten nutzen die Sprachsynthese für die Aufzeichnung von Vorträgen. Ebenso nutzen Autoren TTS-Software, um selbst geschriebene Texte auf Fehler und Verständlichkeit hin zu prüfen.

Ein weiteres Einsatzgebiet findet sich in Form von Software, die das Erzeugen von MP3-Dateien erlaubt. Hierdurch kann Sprachsynthese-Software für die Erzeugung einfacher Podcasts bzw. Audioblogs genutzt werden. Erfahrungsgemäß kann die Produktion von Podcasts bzw. Audioblogs sehr zeitintensiv sein.

Bei der Arbeit mit US-amerikanischer Software ist zu beachten, dass die vorhandenen Stimmen von unterschiedlicher Güte sind. Englische Stimmen haben eine höhere Qualität als deutsche. Eine Ursache ist die reduzierte Verfügbarkeit größerer deutscher Sprachdatenbanken, welche als Grundlage für das Training eines künstlichen Modells erforderlich sind. Das deutschsprachige Projekt Thorsten-Voice[8] versucht diese Lücke zu schließen. Eine 1:1-Kopie der Texte in eine TTS-Software kann nicht empfohlen werden, eine Nachbearbeitung ist in jedem Fall nötig. Dabei geht es nicht nur um das Ersetzen von Abkürzungen und Zahlen in geschriebenen Text, auch das Einfügen von Satzzeichen – auch wenn diese grammatikalisch nicht korrekt sind – kann helfen, um auf das Satztempo Einfluss zu nehmen. Deutsche „Übersetzungen“ mit Anglizismen stellen für die Sprachsynthese i. d. R. ein unüberwindbares Problem dar.

Häufige Anwendungen sind Ansagen in Telefon- und in Navigationssystemen und automatische Haltestellenansagen in Verkehrsmitteln.

Sprachsynthese-Software

[Bearbeiten | Quelltext bearbeiten]
Amiga SoftVoice Sprachsynthese
  • AnalogX SayIt
  • Aristech
  • Audiodizer
  • Balabolka (Freeware, 26 Sprachen, SAPI4 und SAPI5)
  • BOSS, entwickelt am Institut für Kommunikationswissenschaften der Universität Bonn
  • Browsealoud von textHELP
  • Cepstral Text-to-Speech
  • CereProc
  • Coqui AI[9][10]
  • DeskBot
  • espeak (Open Source, viele Sprachen, SAPI5)
  • Festival
  • Festvox
  • FreeTTS (Open Source)
  • GhostReader
  • Gnuspeech
  • Infovox
  • IVONA Text-to-Speech
  • Linguatec Voice Reader 15
  • Logox Clipreader
  • Loquendo TTS
  • MacinTalk und narrator.device von SoftVoice
  • MARY Text-To-Speech entwickelt vom DFKI Language Technology Lab
  • MBROLA[11] unterschiedliche Stimmen (fertigen Phoneme) in verschiedenen Sprachen, die von Sprachsynthesesoftware wie eSpeak oder Festival benutzt werden können.[12]
  • Modulate[13] Software zur Stimmkonversion, benutzt Generative Adversarial Networks[14]
  • Mozilla TTS[15]
  • MWS Reader Sprachausgabe
  • NaturalReader von NaturalSoft
  • OnScreenVoices von tom weber software
  • Parler TTS[16] von Huggingface
  • Piper TTS[17]
  • ReadSpeaker: Webseiten vorlesen und Podcasting
  • Realspeak von Nuance (ehem. ScanSoft), jetzt Kobaspeech 3
  • SAM von Don’t Ask Software[18]
  • SpeechConcept
  • Sprechomat
  • libttspico-utils von SVOX (Kommandozeilen gesteuerte Sprachsynthese in Deutsch, Englisch (GB und US), Spanisch, Französisch und Italienisch)[19]
  • Synte 2 wurde ab 1977 durch Raimo O. Toivonen entwickelt. Ihm ging das Forschungsprojekt VAMKOM voraus, finnisch Vammaisten kommunikaatiovälineiden kehittäminen ‚Entwicklung von Kommunikationsgeräten für Behinderte‘. Es lief in Tampere in den Jahren 1975–1978 und war der Beginn der finnischen mikroprozessorgestützten Sprachtechnologie.
  • Synte 3 war ein Formanten-Sprachsynthesizer. Er wurde in einem kommerziellen Projekt in den Jahren 1980–1981 zunächst am Fachbereich für Elektronik der Technischen Universität Tampere entwickelt. Es wurde unter den Assistenzprofessoren Matti A. Karjalainen, Unto K. Laine und Raimo O. Toivonen entwickelt.
  • SPL1 Forschungs-Sprachsynthesizer (finnisch SPL1-tutkimuspuhesyntetisaattori) wurde von 1981 bis 1983 in Tampere für den akademischen Gebrauch entwickelt. Er basierte auf der kommerziellen PARCAS-Soundkarte von Euroka Oy und der Vocom SPS2-Sprachanalyse-Hardware. Der SPL1 wurde von Grund auf neu programmiert und fand in der Forschung bis Mitte der 1980er Jahre Anwendung.
  • SYNVO
  • Tacotron (Google)[20]
  • Text Aloud MP3
  • Thorsten-Voice
  • Toshiba ToSpeak
  • TTS Robot
  • virsyn CANTOR Vokalsynthese
  • Virtual Voice

Sprachsynthese-Hardware

[Bearbeiten | Quelltext bearbeiten]
  • Votrax
    • SC-01A (analog formant)
    • SC-02 / SSI-263 / „Arctic 263“
  • General Instrument Speech Processor
    • SP0250
    • SP0256-AL2 „Orator“ (CTS256A-AL2)
    • SP0264
    • SP1000
  • Mullard MEA8000[21]
  • National Semiconductor DT1050 Digitalker (Mozer)
  • Silicon Systems SSI 263 (analog formant)
  • Texas Instruments
  • Oki Semiconductor
    • MSM5205
    • MSM5218RS (ADPCM)
  • Toshiba T6721A C²MOS Voice Synthesizing LSI

Siehe auch

[Bearbeiten | Quelltext bearbeiten]

Literatur

[Bearbeiten | Quelltext bearbeiten]
  • Karlheinz Stöber, Bernhard Schröder, Wolfgang Hess: Vom Text zur gesprochenen Sprache. In: Henning Lobin, Lothar Lemnitzer (Hrsg.): Texttechnologie. Perspektiven und Anwendungen. Stauffenburg, Tübingen 2004, ISBN 3-86057-287-3, S. 295–325.
  • Jessica Riskin: Eighteenth-Century Wetware. In: Representations. Bd. 83, Nr. 1, 2003, ISSN 0734-6018, S. 97–125, doi:10.1525/rep.2003.83.1.97.
  • James L. Flanagan: Speech Analysis, Synthesis and Perception (= Kommunikation und Kybernetik in Einzeldarstellungen. Bd. 3). 2nd edition. Springer, Berlin u. a. 1972, ISBN 3-540-05561-4. 1. Aufl. 1965, 3. Aufl. 2008[22]
  • Ville Pulkki, Matti Karjalainen: Communication Acoustics: An Introduction to Speech, Audio and Psychoacoustics. John Wiley & Sons, 2015, ISBN 978-1-118-86654-2.
[Bearbeiten | Quelltext bearbeiten]
Wiktionary: Sprachsynthese – Bedeutungserklärungen, Wortherkunft, Synonyme, Übersetzungen
Commons: Sprachsynthese – Sammlung von Bildern, Videos und Audiodateien

Geschichte

Systeme

Webinterfaces

Fußnoten

[Bearbeiten | Quelltext bearbeiten]
  1. ↑ Dennis Klatt’s History of Speech Synthesis (Memento vom 4. Juli 2006 im Internet Archive)
  2. ↑ Sami Lemmetty: History and Development of Speech Synthesis. In: Review of Speech Synthesis Technology. HELSINKI UNIVERSITY OF TECHNOLOGY, 1. Juni 1999, abgerufen am 14. März 2019 (englisch).
  3. ↑ Arne Hoxbergen: Die Geschichte der Sprachsynthese anhand einiger ausgewählter Beispiele (PDF; 490 kB). Berlin 2005.
  4. ↑ Karl Schnell: Rohrmodelle des Sprechtraktes. Frankfurt 2003.
  5. ↑ Patent DE10040991C1: Verfahren zur parametrischen Synthese von Sprache. Angemeldet am 18. August 2000, veröffentlicht am 27. September 2001, Anmelder: Technische Universität Dresden, Erfinder: Matthias Eichner, Matthias Wolf.‌
  6. ↑ Diplomarbeit_Breitenbuecher (Memento des Originals vom 24. Januar 2012 im Internet Archive)  Info: Der Archivlink wurde automatisch eingesetzt und noch nicht geprüft. Bitte prüfe Original- und Archivlink gemäß Anleitung und entferne dann diesen Hinweis.@1@2Vorlage:Webachiv/IABot/www.ims.uni-stuttgart.de
  7. ↑ Archivierte Kopie (Memento vom 21. Juli 2014 im Internet Archive)
  8. ↑ Thorsten-Voice - Enzyklopädie Marjorie-Wiki. Abgerufen am 15. September 2024.
  9. ↑ Homepage Coqui AI - https://coqui.ai
  10. ↑ coqui. In: GitHub. Abgerufen am 1. März 2024 (englisch).
  11. ↑ Welcome to MBROLA project. In: GitHub. UMONS Institute for Creative Technologies, 30. Januar 2022, abgerufen am 30. Januar 2022 (englisch).
  12. ↑ Sprachausgabe. In: Wiki.ubuntuusers.de. Abgerufen am 30. Januar 2022.
  13. ↑ Modulate: Unlock your voice. Abgerufen am 14. März 2019.
  14. ↑ Technology Review: Sprechen wie Barack Obama. 14. März 2019, abgerufen am 14. März 2019.
  15. ↑ mozilla/TTS. Mozilla, 7. Februar 2021, abgerufen am 7. Februar 2021.
  16. ↑ huggingface/parler-tts. Hugging Face, 15. September 2024, abgerufen am 15. September 2024.
  17. ↑ rhasspy/piper. Rhasspy, 15. September 2024, abgerufen am 15. September 2024.
  18. ↑ https://simulationcorner.net/index.php?page=sam
  19. ↑ libttspico-utils - Paketbeschreibung bei Debian
  20. ↑ Sebastian Grüner: Tacotron 2: Googles Sprachsynthese erreicht fast menschliche Qualität - Golem.de. In: golem.de. 21. Dezember 2017, abgerufen am 14. März 2019.
  21. ↑ http://vesta.homelinux.free.fr/wiki/le_synthetiseur_vocal_mea_8000.html
  22. ↑ Speech Analysis Synthesis and Perception (pdf)
Abgerufen von „https://de.wikipedia.org/w/index.php?title=Sprachsynthese&oldid=256477793“