Respeecher - AI kloning af stemmer

Mac & PC, lydkort, Logic Pro, Cubase, Pro Tools, Ableton Live og andet software.
Nyt svar
Medlemsavatar
Christoffer I. N.
Lydmaskinist
Indlæg: 34601
Sted: Hørsholm

Respeecher - AI kloning af stemmer

Indlæg af Christoffer I. N. »

Jeg har ikke læst ordentligt på det. Det ligner at det blandt andet har været i brug til at klone hvordan unge Mark Hamill lød som Luke, til The Mandalorian.

Links:
https://www.respeecher.com/?hsLang=en
https://www.pro-tools-expert.com/produc ... her-tested
https://www.youtube.com/c/respeecher/videos


3 år gammel video:





Ny video:


Default avatar
Mike-air
Forum Donator
Indlæg: 9940
Sted: Oslo

Indlæg af Mike-air »

Damn, det var nyt for mig. Jeg kan se at der også nyligt er lavet en del forskning på syntetisk sangstemme:

https://scholar.google.com/scholar?hl=e ... +synthesis

Medlemsavatar
the19thbear
Medlem
Indlæg: 3111
Sted: Roskilde

Indlæg af the19thbear »

Virkelig imponerende og det første jeg har hørt der er brugbart. Kan meget vel være jeg skal bruge det på det næste computerspil :)

Default avatar
Mike-air
Forum Donator
Indlæg: 9940
Sted: Oslo

Indlæg af Mike-air »

the19thbear skrev: tirs 8. mar 2022 08:55 Virkelig imponerende og det første jeg har hørt der er brugbart. Kan meget vel være jeg skal bruge det på det næste computerspil :)
Lyder super spændende. Det gad jeg godt høre lidt mere om :-) Du laver lyd til computerspil, eller?

Medlemsavatar
the19thbear
Medlem
Indlæg: 3111
Sted: Roskilde

Indlæg af the19thbear »

Jeps. Laver lyddesign og musik til computerspil.
Har arbejdet fra starten (og gør det stadig), på Deep Rock Galactic https://www.dr.dk/nyheder/kultur/gaming ... digt-endnu

Arbejder også på et andet projekt hvor jeg laver lyddesign og musik og et tredje projekt (et lille et), hvor jeg kun laver musik.

Spørg bare løs :) Vi kan evt tage den over Pm.

Medlemsavatar
Eskobar
Forum Donator
Indlæg: 918
Sted: Hillerød

Indlæg af Eskobar »

Kæft Deep Rock Galactic ser fedt ud

Medlemsavatar
the19thbear
Medlem
Indlæg: 3111
Sted: Roskilde

Indlæg af the19thbear »

:) Prøv det før din nabo!

Medlemsavatar
scofield
Medlem
Indlæg: 222

Indlæg af scofield »

Man kan med sin egen stemme her (kun engelsk):

https://www.resemble.ai/

Medlemsavatar
DUBTEMPLE
Forum Donator
Indlæg: 7990
Sted: DK/SE

Indlæg af DUBTEMPLE »

Cool

Hvordan ligger lander mht til sang ???
/Dub

Default avatar
Mike-air
Forum Donator
Indlæg: 9940
Sted: Oslo

Indlæg af Mike-air »

DUBTEMPLE skrev: ons 9. mar 2022 12:06 Cool

Hvordan ligger lander mht til sang ???
Lader til det mest er den asiatiske verden der er interesseret i det når man ser på hvem der forsker på det :-D

Her er en kinesisk tilgang:
ByteSing: A Chinese Singing Voice Synthesis System Using Duration Allocated Encoder-Decoder Acoustic Models and WaveRNN Vocoders
https://arxiv.org/pdf/2004.11012.pdf

Eksempler kan høres her:
https://bytesings.github.io/paper1.html

Og her en koreansk:
MLP Singer: Towards Rapid Parallel Korean Singing Voice Synthesis
https://arxiv.org/pdf/2106.07886.pdf
Eksempler kan høres her:
https://mlpsinger.github.io/

La os give det et år eller to :lol: :lol:

Default avatar
Mike-air
Forum Donator
Indlæg: 9940
Sted: Oslo

Indlæg af Mike-air »

the19thbear skrev: tirs 8. mar 2022 12:14 Jeps. Laver lyddesign og musik til computerspil.
Har arbejdet fra starten (og gør det stadig), på Deep Rock Galactic https://www.dr.dk/nyheder/kultur/gaming ... digt-endnu

Arbejder også på et andet projekt hvor jeg laver lyddesign og musik og et tredje projekt (et lille et), hvor jeg kun laver musik.

Spørg bare løs :) Vi kan evt tage den over Pm.
Super sejt! :thumbup: Hvordan tror du det her eks. kan bruges i spilverdenen ud over de mest indlysende som at klone en nulevende præsident etc.?

Medlemsavatar
the19thbear
Medlem
Indlæg: 3111
Sted: Roskilde

Indlæg af the19thbear »

Der kan let være flere hundrede voice lines der skal indspilles i et spil.
Og lad os så sige at det er et spil hvor du kan vælge forskellige "classes" ( asiat, sort, hvid, kvinde).
Du kan så bare hyre 1 voice actor ind og bruge ham som guide til alle classes. Så man kan sige at man går fra at skulle indspille 500 voicelinesx4, til kun at skulle indspille dem 1 gang.
Og mere:
Lad os så sige at 50% af dine speaks er de samme (altså nogle der skal bruges i alle classes).
Så kan du nøjes med at indspille dem 1 gang og sp re-speeche dig ud af resten.

Default avatar
Mike-air
Forum Donator
Indlæg: 9940
Sted: Oslo

Indlæg af Mike-air »

the19thbear skrev: ons 9. mar 2022 14:25 Der kan let være flere hundrede voice lines der skal indspilles i et spil.
Og lad os så sige at det er et spil hvor du kan vælge forskellige "classes" ( asiat, sort, hvid, kvinde).
Du kan så bare hyre 1 voice actor ind og bruge ham som guide til alle classes. Så man kan sige at man går fra at skulle indspille 500 voicelinesx4, til kun at skulle indspille dem 1 gang.
Og mere:
Lad os så sige at 50% af dine speaks er de samme (altså nogle der skal bruges i alle classes).
Så kan du nøjes med at indspille dem 1 gang og sp re-speeche dig ud af resten.
Ahh, det giver rigtig god mening! Hurtigere og billigere produktion 👌

Default avatar
Mike-air
Forum Donator
Indlæg: 9940
Sted: Oslo

Indlæg af Mike-air »



Viser sig at første deep learning baserede artikkel på det her område kom allerede i 2017. Og nu har Nvidia også noget software som dødelige kan tage i brug :)

Medlemsavatar
the19thbear
Medlem
Indlæg: 3111
Sted: Roskilde

Indlæg af the19thbear »

vildt

Medlemsavatar
Christoffer I. N.
Lydmaskinist
Indlæg: 34601
Sted: Hørsholm

Indlæg af Christoffer I. N. »

Bruges også til James Earl Jones/Darth Vader:
https://www.kino.dk/nyheder/2022/09/iko ... ntelligens

Nyt svar