Gürültü giderme nasıl çalışır: gürültü profilleri, AI ve sesi yeniden üretme

Bir kayıt aynı anda birçok frekanstan oluşur

Her ses bir frekans karışımıdır. Uğultu pes bir tondur, hışırtı geniş bir aralığa yayılmış tiz tonlardır, insan sesi ise her hecede değişen bir tonlar kümesidir. Bir kaydı, zaman soldan sağa akacak ve ses perdesi aşağıdan yukarıya yükselecek şekilde çizerseniz konuşma parlak şeritler olarak görünür, sabit gürültü ise bunların arkasında bir pus gibi durur.

1. Gürültü profili: önce gürültüyü öğrenmek, sonra kaydın her yerinden gidermek

Klasik yöntem sizden tek bir şey ister: konuşmanın olmadığı, yalnızca gürültünün duyulduğu birkaç saniye. Denoise'da bu, Klasik motorudur; sizden böyle bir bölümü işaretlemenizi ister ve birkaç tane de önerir. Bu bölümde gürültünün her frekans bandında ne kadar yüksek olduğunu ölçer (buna gürültü profili denir), ardından bu bantları tüm kayıt boyunca aynı ölçüde kısar. Bunun ne kadar ileri gideceğini Gürültü azaltma düzeyi ayarı belirler.

Bu yöntem en iyi sonucu hiç değişmeyen gürültüde verir: fan, klima, elektrik uğultusu, bant hışırtısı. Trafik, rüzgar ya da konuşan insanlar gibi gelip giden gürültülerde ise zorlanır, çünkü tek bir profil bunların hepsini tarif edemez. Üstelik her yerde aynı bantları kıstığı için fazla ileri götürüldüğünde sulu, dalgalı bir ses bırakır ve insan sesiyle gürültünün aynı frekansları paylaştığı her noktada sesi cılızlaştırır.

2. AI ile gürültü bastırma: aynı fikir, işi sizin yerinize yapıyor

AI gürültü gidericiler aynı işi sizden örnek istemeden yapar. Her türlü gürültüyle karıştırılmış binlerce saatlik temiz konuşmayla eğitildikleri için o görüntüde bir insan sesinin neye benzediğini ve gürültünün neye benzediğini öğrenmişlerdir. Birkaç milisaniyede bir, duyulan sesin ne kadarının konuşma olduğunu bant bant tahmin eder, o kısmı korur ve geri kalanını kısarlar. Her an yeniden karar verdikleri için değişen gürültüyü de izlerler: geçen bir araba, bir rüzgar hamlesi, bir kapı.

Denoise'da varsayılan olarak AI · Auto bunu yapar; DPDFNet ve DeepFilterNet modelleri de ayrıca tek başlarına AI · DPDFNet ve AI · Fast Denoise olarak sunulur. AI · aTENNuate ise frekans bantları yerine doğrudan ses dalgasının kendisi üzerinde çalışır. Hepsi yalnızca kaydedilmiş sesle çalışır, bu yüzden kimsenin söylemediği kelimeleri ekleyemez. Ne kadar gürültü giderileceğine Gürültü azaltma gücü ayarı karar verir; biraz gürültü bırakmak sıklıkla daha doğal duyulur.

3. Onarım: kaydın kaybettiğini yeniden oluşturmak

Bazı kayıtlar yalnızca gürültü kazanmamış, sesin bir kısmını da kaybetmiştir. Bir telefon görüşmesi, eski bir ses kayıt cihazı ya da yoğun sıkıştırma yüksek frekansları kesebilir; bu yüzden ses, sessiz bir odada bile boğuk duyulur. Konuşma kalitesini geri kazan seçeneği, eksik olan bu üst kısmı geriye kalandan yeniden oluşturur. Sesin yerine geçmez, sese ekleme yapar; bu yüzden kelimeler, söylenen kelimeler olarak kalır. Eklediği şey kaybolan ayrıntının kendisi değil, inandırıcı bir parlaklıktır.

4. Yeniden üretme: eskisinin tarifinden yeni bir ses

En yeni onarım modelleri daha da ileri gider. Hasarlı kaydı dinler, kayıtta olduğuna inandıkları konuşmayı çıkarır ve bir konuşma sentezleyicisinin yapacağına çok benzer şekilde bu konuşmanın yepyeni bir kaydını üretirler. AI · Sidon, bir gürültü gidericinin kurtaramadığı sesleri işte bu sayede kurtarabilir: ağır distorsiyonlu, kırpılmış ya da çok boğuk sesleri.

Sorun şu ki sonuç, modelin en iyi tahminidir. Orijinalin çok fazlası eksik olduğunda yeniden üreten bir model, kulağa doğru gelen, sesi ve ritmi yerinde olan ama kimsenin söylemediği heceleri söyleyen, bazen de düpedüz anlamsız bir konuşma üretebilir. Denoise'un daha önce kullandığı model olan VoiceFixer ile ağır hasarlı bir ders kaydında tam olarak bunu duyduk: net duyulan ama hiçbir anlam taşımayan bir konuşma. Onun yerini alan Sidon, kelimeleri koruyacak şekilde geliştirildi ve test edildi; ancak hiçbir yeniden üretme modeli bundan muaf değildir. Bu yüzden önemli olan her şeyde isimleri ve sayıları kontrol edin ve yeniden üretmeyi yalnızca normal gürültü giderme yardımcı olamadığında kullanın.

Sonucun ne kadar iyi olabileceğini ne belirler

Yukarıdaki yöntemlerin hepsi yalnızca kaydın hâlâ içerdiği şeyle çalışabilir. En önemli dört etken şunlardır:

• Sesin ne kadarının sağlam kaldığı. Sesin bir kısmı hiç kaydedilmemişse ya da düşük kaliteli bir dosya biçimi yüzünden atılmışsa gürültü giderme onu geri getiremez; yalnızca onarım, inandırıcı bir versiyonunu ekleyebilir.
• Gürültünün sese kıyasla ne kadar yüksek olduğu. Gürültü sesle aynı yükseklikte ya da daha yüksek olduğunda ikisi frekansların çoğunu paylaşır ve gürültüyü çıkarmak sesin bazı kısımlarını da beraberinde götürür: sonuç cılız, boğuk ya da robotik duyulur.
• Kayıtta kırpılma olup olmadığı. Ses, mikrofon ya da kayıt seviyesi için fazla yüksek geldiyse ses dalgasının tepeleri düz biçimde kesilmiştir. Bu cızırtılı distorsiyon artık ayrı bir gürültü değil, sesin bir parçasıdır; bu yüzden gürültü giderici onu olduğu gibi bırakır. Onu ancak yeniden üretme baştan çizebilir.
• Arka planda başka neyin insan sesine benzediği. Konuşan başka insanlar ya da vokalli müzik her yönteme konuşma gibi görünür, bu yüzden bir kısmı kalır. Müzik içinse bunun yerine AI · Music vokalleri enstrümanlardan ayırır.

Yankı gürültü değildir

Bir odanın yankısı, yani reverb, duvarlardan, tavandan ve zeminden bir an sonra yeniden gelen sesin kendisidir. Aynı sesten oluştuğu için gürültüden daha zor giderilir: AI gürültü gidericiler bir kısmını azaltır, ancak büyük bir salonda, bir merdiven boşluğunda ya da boş bir odada kelimeler birbirine karışır ve hiçbir ayar onları tamamen netleştiremez. Çözüm mesafedir: mikrofon ağza ne kadar yakınsa ses, yankısına kıyasla o kadar yüksek olur.

En iyi gürültü giderme, kayda başlamadan önce yapılır

Yazılım kayıtları kurtarır ama hiç yakalanmamış bir sesi geri getiremez. Birkaç alışkanlık her ayardan daha fazlasını sağlar:

• Mikrofonu yaklaştırın. Konuşan kişiye yakın tutulan bir telefon, odanın öbür ucundaki bir masada duran telefondan daha iyidir. Röportajlar ve videolar için konuşan kişinin yakasına takılan bir yaka mikrofonu (lavalier), kablolu da olsa kablosuz da olsa tek başına en büyük iyileştirmedir.
• Rüzgardan koruyun. Dış mekânda harici bir mikrofona takılan köpük ya da tüylü bir rüzgarlık işe yarar; telefonla kayıt yaparken sırtınızı rüzgara dönün ya da telefonu elinizle veya bir köşeye sığınarak rüzgardan koruyun.
• Seviyeyi izleyin. Seviye göstergesi tavan yaparsa ses kırpılır. Kaydın biraz fazla kısık olması daha güvenlidir, çünkü kısık ses sonradan yükseltilebilir ama kırpılma geri alınamaz.
• Bulabildiğiniz en sessiz yeri seçin. Kayıt sırasında fanları ve klimayı kapatın; trafikten ve çalışan makinelerden uzaklaşın.
• Yumuşak eşyalı odalar daha az yankı yapar. Mobilyalar, perdeler, halılar ve kitaplıklar yankıyı emer; fayanslar, cam ve boş odalar ise onu geri yansıtır.