Adobe werkt aan functie om stem en achtergrondgeluid te scheiden

Adobe werkt aan een manier om stemmen en achtergrondgeluiden te scheiden in onder meer Audition en Premiere Pro.

Adobe heeft de functie laten zien als preview op zijn Max-evenement in Japan als 'sneakshowcase', waarbij het bedrijf laat zien waaraan het werkt . De AI-technologie stelt klanten in staat om onder meer meerdere stemmen te scheiden in verschillende tracks en stemmen en achtergrondgeluiden te scheiden. Dat is onder meer nuttig bij het editen van video. Adobe zegt niet wanneer dit in de reguliere versies van zijn programma's zal komen. Vaak gebeurt dat enkele maanden tot jaren na de presentatie van een technologie.

Reacties (19)

[Darida]

Deze feature is een extra abonnement aan 30€ per maand waard! 😂 😈

[litebyte]

Adobes ai functionaliteit om achtergrond muziek/geluid qua lengte zo aan te passen aan de lengte van het beeld fragment zonder dat je hoort dat er delen uit het geluidsbestand geknipt worden werkt al zo 'eng' goed dat ik hoop dat dit ook snel beschikbaar komt , zou voor heel veel nieuws en reportage toepassingen geweldig zijn.

[nandervv]

Ja, kun je nog beter de vragen en antwoorden willekeurig knippen en plakken uit een interview .
Echt goed voor de betrouwbaarheid van het nieuws, die niet-van-echt-te-onderscheiden knip-en-plak functies.

[litebyte]

Nee, je begrijpt het niet. Ik heb vaak een achtergrond tune nodig voor achter het nieuwsitem, hij past de tune zo aan, dat je niet hoort dat er in geknipt is, hoe lang of kort het nieuwsitem ook is, misschien had ik dat beter moeten toelichten.

[downtime]

Voor sommige mensen wel. Ik kan me voorstellen dat een team wat veel interviews en rapportages op locatie doet graag zo'n plugin gebruikt en daar ook best € 30 p/m voor wil betalen. Dat kan het verschil maken tussen productief werken en onverrichter zake weer naar huis.

[Anoniem: 340120]

Nou ik ga straks kijken of het goedkoper is dan het uitbesteden en laat je weten wat het wordt

[Sponge]

Toevallig had ik onlangs zoiets nodig, en was dat net toen de nieuwe Beatles plaat gereleased was (twee weken geleden?). Zowaar plaatste iemand op NuJij de opmerking dat er al iets bestond om stem en achtergrondgeluid te splitsen via een AI website, namelijk: https://www.lalal.ai/

Ik heb het even getest met een klein stukje video wat ik moest integreren in een andere video. Ik dacht dat de noise filter van Premiere genoeg zou zijn, maar die kon helaas toch niet de achtergrond muziek verwijderen zonder te grote impact op de stem.

Dus die LaLal.ai eens getest: en ik moet zeggen... het werkte echt heel goed!

[Sevenanths]

Als je isolatie van stem en achtergrond lokaal wilt proberen, kun je altijd kijken naar spleeter van Deezer. Dit is een model dat je zelf op je eigen GPU kunt draaien, waardoor je niet vasthangt aan de beperkingen van een partij als lalal.ai.

[Jojos104]

Ik ken lalal.ai ook pas recent en de resultaten van het scheiden van instrumenten zijn echt heel goed! Dat is natuurlijk een andere toepassing als in het artikel, maar de techniek werkt!

[THETCR]

Voor de geïnteresseerde, partijen zoals iZotope bieden deze functionaliteit al veel langer aan.

[Marc van asch]

Izotope Rx10 is daar vrij goed in

[Gutteguttegut]

480p ?

[Wasabi!]

Lol, zag van de week een hele oude aflevering van CSI: Crime Scene Investigation..... Was geen probleem tig jaar geleden.

[wc2wc]

Haha, of " the conversation" van Coppola uit 1974

[xzaz]

Ja, of die video waar de 50Hz frequentie gefilterd kan worden en getest kan worden op een timestamp.

[koelpasta]

Ik heb de aflevering niet gezien, maar klinkt op zn minst aannemelijk. Wil je video timecode (VITC) lezen dan zul je o.a. de 50Hz (zal wel 60 zijn want amerika?) weg moeten filteren. Waarschijnlijk niet specifiek, maar er moet iig gefiltered worden en dan wordt ook die frequentie weggehaald.

[lacobo]

Ook Davinci Resolve (Studio) heeft een dergelijke functie ingebouwd.

[Dingen]

Ze bieden deze functionaliteit nu al aan in "podcast enhance", een tool om een slechte stemopname te verbeteren. Werkt verbazingwekkend goed, maar doet een stuk meer dan alleen achtergrondgeluid weghalen: https://podcast.adobe.com/enhance

Er zijn trouwens ook wel meer niet-Adobe tools om stem- en achtergrondgeluid te scheiden, zoals de VST-plugins Waves Clarity en Supertone Clear, of een webapp als https://lalal.ai. Met die laatste kun je veel meer zaken van elkaar scheiden trouwens, een functie die ook bv in de laatste versie van Fruity Loops (FL Studio) zit.

Kortom, dit is een grote trend binnen audio-postproductie op dit moment en het is daarom ook niet zo raar dat Adobe er ook mee komt. Ze zijn zeker niet de eersten.

[Reactie gewijzigd door Dingen op 23 juli 2024 00:01]

[Jellstr]

Een mooie volgende stap zou zijn om middels deze techniek de nodeloze (en vaak irritante) achtergrond muziek te verwijderen uit Youtube video's.
Heel veel goede, informatieve video's zijn lastig te volgen doordat er achtergrond muziek die niets toevoegd is opgenomen