ElevenLabs bietet bereits KI-generierte Versionen menschlicher Stimmen und Musik an. Jetzt können Nutzer damit auch Soundeffekte für Podcasts, Filme oder Spiele erstellen. Das neue Soundeffekt-Tool kann bis zu 22 Sekunden Sounds basierend auf Benutzeransagen erzeugen, die mit der Sprach- und Musikplattform des Unternehmens kombiniert werden können, und bietet Benutzern mindestens vier herunterladbare Audioclip-Optionen.
Das Unternehmen gibt an, mit der Medienplattform Shutterstock zusammengearbeitet zu haben, um eine Bibliothek zu erstellen und sein Modell anhand seiner Audioclips zu trainieren. Shutterstock hat seine Inhaltsbibliotheken an zahlreiche KI-Unternehmen lizenziert, darunter OpenAI, Meta und Google.
Die Verwendung von Soundeffekten ist kostenlos, kostenpflichtige Stufen können jedoch Audioclips verwenden, die mit kommerziellen Lizenzen generiert wurden, während kostenlose Benutzer „ElevenLabs kennzeichnen müssen, indem sie ‚elevenlabs.io‘ in den Titel aufnehmen.“ ElevenLabs-Benutzer haben beim Verfassen von Eingabeaufforderungen eine festgelegte Zeichenbeschränkung. Kostenlose Benutzer erhalten 10.000 Zeichen pro Monat. Für Soundeffekte gibt ElevenLabs auf seiner FAQ-Seite an, dass 40 Zeichen pro Sekunde benötigt werden, wenn Benutzer die Dauer des Audioclips selbst festlegen. Wenn Sie die Standard-Audiodauer verwenden, werden für jede Aufforderungsanforderung 200 Zeichen berechnet.
Auf dem Markt gibt es bereits Bibliotheken mit Soundeffekt-Clips für Videospielentwickler, Filmemacher und Entwickler. Aber manchmal können diese teuer sein oder es schwierig sein, den richtigen Klang zu finden. ElevenLabs sagt in seinem Blogbeitrag, dass es Soundeffekte entwickelt hat, „um schnell, kostengünstig und maßstabsgetreu reichhaltige, immersive Klanglandschaften zu erzeugen“.
Auch andere KI-Entwickler entwickeln eigene Text-to-Sound-Generatoren. Stability AI hat letztes Jahr Stable Audio veröffentlicht, das Audioclips mit Musik und Soundeffekten erstellt, und die AudioCraft-Modelle von Meta erzeugen natürlichen Klang (denken Sie an Hintergrundgeräusche wie Wind oder Verkehr).