UVR5歌曲伴奏提取,人聲分離軟件,原理已超過(guò)我的認(rèn)知

ID:688692 · 發(fā)表于 2022-10-30 17:05

這個(gè)軟件叫做Ultimate Vocal Remover，網(wǎng)上很容易搜索到并下載安裝，所以資源我就不轉(zhuǎn)了。
但是他的處理結(jié)果已經(jīng)完全不在我的知識(shí)認(rèn)知體系內(nèi)了。
從模電一路走來(lái)，調(diào)音臺(tái)，運(yùn)放疊加，濾波電路，很好理解。
音效混響效果，數(shù)字采樣后延遲疊加，可以理解
均衡器，也就是濾波器，可以理解。
發(fā)展到后面的數(shù)字調(diào)音臺(tái)，先采樣，用dsp做疊加處理，AGC，F(xiàn)FT濾波，也能理解

但是這個(gè)，能把混在一起的音頻重新分離出來(lái)，我從電子學(xué)的角度我理解不了

雖然是知道用的是AI技術(shù)，經(jīng)過(guò)訓(xùn)練后得到的AI模型。
真的是模擬大腦了？人腦很容易腦補(bǔ)將一首音樂(lè)中的各個(gè)元素分離出來(lái)的聲音，現(xiàn)在計(jì)算機(jī)也可以了。原理是什么？

分離得到的伴奏.rar (5.39 MB, 下載次數(shù): 10)

分離得到的人聲.rar (4.01 MB, 下載次數(shù): 7)

怎么設(shè)置附件不需要黑幣下載？下載附件的，自己給個(gè)回帖獎(jiǎng)勵(lì)先補(bǔ)回來(lái)吧。

ID:284488 · 發(fā)表于 2022-10-31 09:32

謝謝樓主之貼心分享！

ID:262 · 發(fā)表于 2022-11-1 23:21

這個(gè)不一定要ai技術(shù),很久以前就有類似功能了,頻率分離

ID:844772 · 發(fā)表于 2022-11-2 08:55

我沒(méi)用過(guò)，但想來(lái)技術(shù)難度不大，但工作量大。主要是用傅里葉分解，把時(shí)域變換到頻域，如果不懂看看科普4G通訊的原理，每種樂(lè)器、男女聲音，都有特征頻譜的，尤其各種樂(lè)器頻譜比較固定，如果把樂(lè)器的特征做數(shù)據(jù)庫(kù)，就可以把每樣的樂(lè)器聲音單獨(dú)提取出來(lái)，剩下的就是人聲了。其實(shí)人聲音雖然差異大其實(shí)也不難，就像圖像識(shí)別人和動(dòng)物，不過(guò)是計(jì)算所有特征點(diǎn)的歐拉距離的大小，這里會(huì)用機(jī)器學(xué)習(xí)，用于抽取計(jì)算哪些特征頻譜用于和標(biāo)準(zhǔn)數(shù)據(jù)庫(kù)比較歐拉距離，然后以此分類不同樂(lè)器和人聲等。另外，我在網(wǎng)上見(jiàn)過(guò)潛水艇聲吶屏幕的截圖，覺(jué)得聲吶也是這么分析遇到的船的。

ID:688692 · 發(fā)表于 2022-11-2 10:04

glinfei 發(fā)表于 2022-11-2 08:55
我沒(méi)用過(guò)，但想來(lái)技術(shù)難度不大，但工作量大。主要是用傅里葉分解，把時(shí)域變換到頻域，如果不懂看看科普4G通 ...

你說(shuō)的是FFT分析后，用數(shù)據(jù)庫(kù)里面的頻譜數(shù)據(jù)對(duì)結(jié)果進(jìn)行匹配消減，然后反變換回來(lái)得到時(shí)域原始信號(hào)？

但是就是這個(gè)幅度這塊我都想不出如何處理。
同一個(gè)樂(lè)器，演奏的時(shí)候，音量是變化的，那么得到的頻譜幅度也是變化的。
另外，樂(lè)器音準(zhǔn)是不可能完全準(zhǔn)確的
所以他這個(gè)都能完全分立出來(lái)我就想不通了。

幾個(gè)已知的特征信號(hào)混合后，濾除其中一個(gè)，這個(gè)我還是能理解的
現(xiàn)在這個(gè)幾乎是相當(dāng)于未知的N個(gè)信號(hào)，也能分離出來(lái)。

ID:965189 · 發(fā)表于 2022-11-2 10:17

以前的簡(jiǎn)單消人聲電路是用相位實(shí)現(xiàn)的。

ID:688692 · 發(fā)表于 2022-11-2 10:20

君工創(chuàng) 發(fā)表于 2022-11-2 10:17
以前的簡(jiǎn)單消人聲電路是用相位實(shí)現(xiàn)的。

那是直接用兩個(gè)聲道相減，因?yàn)槿寺暿窃趦陕暤乐型韧辔坏模瑴p掉就沒(méi)了。
但是連帶的很多居中的樂(lè)器也沒(méi)了。效果差得很。

ID:1034262 · 發(fā)表于 2022-11-2 11:15

我也搞音頻的，這個(gè)軟件是我兒子玩的時(shí)候跟我說(shuō)的，我就給他幾首流行歌，真的可以將歌聲、音樂(lè)分立出來(lái)，不帶一點(diǎn)雜音的，附加失真也很小，真的是強(qiáng)大。

ID:844772 · 發(fā)表于 2022-11-2 11:31

cnos 發(fā)表于 2022-11-2 10:04
你說(shuō)的是FFT分析后，用數(shù)據(jù)庫(kù)里面的頻譜數(shù)據(jù)對(duì)結(jié)果進(jìn)行匹配消減，然后反變換回來(lái)得到時(shí)域原始信號(hào)？

...

能搞懂FFT，就能設(shè)計(jì)這個(gè)軟件了。任何樂(lè)器無(wú)論發(fā)強(qiáng)音還是弱音我們都能分辨出來(lái)，是因?yàn)橐羯珕?wèn)題，我剛才說(shuō)特征譜線指一個(gè)樂(lè)器發(fā)出的一個(gè)音符，它基音和泛音頻率集合和幅度關(guān)系，音準(zhǔn)、音色等等問(wèn)題不過(guò)是導(dǎo)致的頻點(diǎn)的漂移和幅度關(guān)系的變化，這是有范圍的，實(shí)際也是通過(guò)計(jì)算歐拉距離來(lái)處理的。你后一個(gè)問(wèn)題應(yīng)該是：一起發(fā)聲的樂(lè)器，基音必然是相同的，很多泛音也相同，怎么處理？實(shí)質(zhì)還是頻譜特征問(wèn)題，每種樂(lè)器泛音都不同，找出特征差異就可以區(qū)分開(kāi)，然后還有計(jì)算各自的能量密度，自然就區(qū)分了。我覺(jué)得這個(gè)事難度就是有個(gè)各種樂(lè)器數(shù)據(jù)庫(kù)，這個(gè)工作量非常大，就跟人的樣子識(shí)別用的那個(gè)一樣，估計(jì)有個(gè)好心人給共享了，所以突然一大堆這種軟件就出現(xiàn)了。

ID:383215 · 發(fā)表于 2022-11-4 15:17

感謝樓主的的分享！孤陋寡聞的我，想不到這世界上還有那么好的軟件，這個(gè)軟件的原理我不清楚，只是我平時(shí)比較喜歡唱歌，有的歌很難找到好的伴奏，看到樓主的這個(gè)帖子，很想下載UVR5試試，經(jīng)過(guò)百度得知，UVR5下載不太方便，最關(guān)鍵的是對(duì)電腦要求太高，我的電腦性能太一般，下載了也不見(jiàn)得好用，百度還說(shuō)有在線的伴奏提取，于是找到一個(gè)人聲分離網(wǎng)站，上傳了我需要分離伴奏的歌曲，幾分鐘搞定一首歌，可以免費(fèi)整曲試聽(tīng)，下載需要成為VIP，我以錄音方式得到伴奏。從昨天到現(xiàn)在，我已經(jīng)把我特別喜歡唱的幾首歌通過(guò)這個(gè)網(wǎng)站得到伴奏，這些伴奏雖然和原聲伴奏相比有一定差距，但是，比那些伴奏網(wǎng)上的消音版要好很多很多，用來(lái)翻唱歌曲、自?shī)首詷?lè)綽綽有余，我喜歡的一些老歌受當(dāng)時(shí)錄音技術(shù)的限制，分離出來(lái)的伴奏效果稍差一些，用無(wú)損音樂(lè)分離出來(lái)的伴奏就比較好一些。從百度的描述來(lái)看，這個(gè)人聲分離網(wǎng)站用的軟件，可能還不一定就是UVR5，或許UVR5分離伴奏的效果更好，再看看其他分離伴奏的網(wǎng)站，或者以后搞一個(gè)性能好一點(diǎn)的電腦下載UVR5用來(lái)分離伴奏。

ID:844772 · 發(fā)表于 2022-11-4 17:37

質(zhì)量好不好就看他們用卷積神經(jīng)網(wǎng)絡(luò)訓(xùn)練的量大不大了，不過(guò)把數(shù)據(jù)庫(kù)不認(rèn)識(shí)的頻率剔除降噪，這樣出來(lái)的音樂(lè)是不是更像電聲樂(lè)器了。

ID:688692 · 發(fā)表于 2022-11-4 23:35

kmsj 發(fā)表于 2022-11-4 15:17
感謝樓主的的分享！孤陋寡聞的我，想不到這世界上還有那么好的軟件，這個(gè)軟件的原理我不清楚，只是我平時(shí)比 ...

沒(méi)那么玄乎，i5 4代的CPU都能跑。一開(kāi)始總是出錯(cuò)，后來(lái)百度才找到原因，我把虛擬內(nèi)存關(guān)閉了，重新打開(kāi)就好了。

高配電腦可以利用顯卡計(jì)算速度快很多，低配電腦用CPU計(jì)算稍微慢點(diǎn)但是我覺(jué)得速度還是可以接受的。
URV5的下載一搜就有呢，5.4版，5個(gè)G大小，一般都網(wǎng)盤(pán)。阿里云盤(pán)和百度網(wǎng)盤(pán)都行。

ID:1065366 · 發(fā)表于 2023-3-6 10:15

coody_sz 發(fā)表于 2022-11-2 11:15
我也搞音頻的，這個(gè)軟件是我兒子玩的時(shí)候跟我說(shuō)的，我就給他幾首流行歌，真的可以將歌聲、音樂(lè)分立出來(lái)，不 ...

你好，我提取的伴奏就不行，一些地方直接就沒(méi)有伴奏了，直接就是沒(méi)有音樂(lè)，這是怎么回事啊，謝謝

帳號(hào)		自動(dòng)登錄	找回密碼
密碼			立即注冊(cè)


500 黑幣	回復(fù)本帖可獲得 5 黑幣獎(jiǎng)勵(lì)! 每人限 3 次

久久久久久久999_99精品久久精品一区二区爱城_成人欧美一区二区三区在线播放_国产精品日本一区二区不卡视频_国产午夜视频_欧美精品在线观看免费

UVR5歌曲伴奏提取,人聲分離軟件,原理已超過(guò)我的認(rèn)知