Pengurangan Bising AI: Cara Kerjanya dalam Bahasa Sederhana

Pengurangan bising AI dijelaskan: bagaimana itu mengalahkan gerbang bising dan pengurangan spektral lama, apa yang bisa dan tidak bisa dilakukannya, dan kapan menggunakan denoise langsung atau offline.

Pengurangan bising AI menjanjikan sesuatu yang tidak pernah bisa dilakukan alat lama: menarik bising latar belakang dari bawah suara Anda saat Anda masih berbicara, bukan hanya di celah diam. Selama beberapa dekade, membersihkan audio berarti membisukan bagian yang sunyi atau mengurangkan jejak bising yang tetap, dan kedua pendekatan jatuh terpisah saat kamar Anda menjadi tidak dapat diprediksi. Panduan ini menjelaskan, dalam bahasa sederhana, bagaimana pengurangan bising AI benar-benar bekerja, mengapa itu mengalahkan metode klasik, di mana itu masih gagal, dan cara memilih pendekatan yang tepat untuk perekaman, pengeditan, panggilan, atau streaming langsung. Tidak ada hype, tidak ada kotak hitam, hanya mekanik.


TL;DR

  • Metode lama: gerbang bising membisukan audio di bawah ambang volume; pengurangan spektral sampel bising dan mengurangkan jejaknya. Keduanya meninggalkan artefak.
  • Pengurangan bising AI dilatih untuk memisahkan suara dari semua yang lain, sehingga ia mengurangi bising bahkan saat Anda berbicara, dan digeneralisasikan ke suara yang tidak pernah disampelnya.
  • Generalisasi itulah yang memungkinkan Anda menekan klik keyboard, sirene, dan suara lain, bukan hanya dengung yang stabil.
  • Live vs offline adalah pemisahan utama: denoise AI real-time berjalan dengan anggaran latensi yang ketat dan lebih lembut; pembersihan offline dapat lebih berat.
  • Batasan nyata: pewarnaan suara, artefak bawah air saat didorong terlalu keras, dan kegagalan total menghilangkan musik (itu adalah pekerjaan yang berbeda).
  • Untuk audio bersih yang keluar langsung, penekanan bising real-time VoxBooster adalah salah satu opsi; pilih alat Anda menurut skenario, bukan hype.

Apa itu pengurangan bising AI?

Pengurangan bising AI adalah pembersihan audio yang dilakukan oleh model yang dilatih untuk membedakan ucapan manusia dari semua suara lain. Alih-alih membisukan bagian yang sunyi atau mengurangkan profil bising yang tetap, ia telah mempelajari bentuk suara itu sendiri, sehingga dapat mengurangi bising latar belakang bahkan saat Anda berbicara, bukan hanya di jeda di antara kata-kata.

Perbedaan tunggal itu, pemisahan berdasarkan konten alih-alih volume, adalah seluruh cerita. Segala yang lain di artikel ini adalah konsekuensi darinya. Setelah alat memahami seperti apa suara, ia berhenti peduli apakah bisingnya keras atau sunyi, stabil atau tiba-tiba, disampel atau sama sekali baru. Ia hanya mencoba menyimpan suara dan menjatuhkan sisanya. Untuk melihat mengapa itu penting, Anda harus tahu apa yang datang sebelumnya.

Bagaimana pengurangan bising tradisional bekerja sebelum AI

Selama sebagian besar sejarah audio, dua teknik melakukan hampir semua penghilangan bising, dan keduanya masih ada karena murah dan dapat diprediksi. Mereka layak dipahami karena pengurangan bising AI didefinisikan sebagian besar dengan memperbaiki kelemahan mereka.

Gerbang bising: ambang volume

Sebuah gerbang bising adalah trik tertua dalam buku. Ia memantau kekerasan sinyal Anda dan membisukan apa pun di bawah ambang yang Anda atur. Letakkan gerbang pada -40 dB dan apa pun yang lebih tenang dari itu dibisukan. Ketika Anda berbicara, Anda melampaui ambang, gerbang terbuka, dan suara Anda lewat. Ketika Anda berhenti, Anda jatuh di bawahnya, gerbang ditutup, dan ruangan menjadi senyap. Matematikanya sepele: bandingkan level dengan ambang, lalu buka atau tutup.

Tangkapannya adalah bahwa gerbang hanya mengerti kekerasan, tidak pernah konten. Itu tidak bisa membedakan suara dari bising. Jadi saat Anda berbicara dan gerbang terbuka, setiap bit bising latar belakang mengalir di bawah kata-kata Anda. Kipas, keyboard, lalu lintas di luar, semuanya melewati saat suara Anda melakukan. Anda juga mendengar gerbang bekerja: audio beralih dari diam total ke volume penuh saat membuka dan menutup, menghasilkan efek pompa atau berderak pada napas dan ekor kalimat. Gerbang adalah petugas yang memeriksa volume di pintu dan membiarkan semua orang keras masuk.

Pengurangan spektral: jejak bising

Langkah selanjutnya adalah pengurangan spektral. Anda menangkap sampel singkat hanya bising, biasanya satu detik “diam” di mana hanya ruangan itu hadir, dan perangkat lunak membangun profil frekuensi, jejak bising, dari apa yang terlihat seperti bising itu di spektrum. Kemudian ia mengurangkan jejak itu dari seluruh rekaman, band frekuensi demi band. Dengung pada frekuensi daya dinding, dengungan di atas, drone dari AC: karena mereka konstan dan dapat diprediksi, mengurangkan jejak mereka mendorong mereka jauh ke bawah. Ini adalah mesin di balik efek pengurangan bising Audacity klasik yang telah digunakan banyak orang.

Pengurangan spektral jauh lebih cerdas daripada gerbang karena berfungsi bahkan saat Anda berbicara. Tetapi ia berasumsi bising tetap di tempat. Saat bising berubah, mobil melewati, seseorang batuk, kursi mengikis, jejak yang disimpan tidak lagi cocok dengan kenyataan, dan pengurangan meninggalkan residu yang bergelombang dan berbusa yang disebut insinyur bising musik: artefak tonal kecil yang bergerak di sekitar suara Anda. Tingkatkan kekuatan untuk membunuh lebih banyak bising dan artefak tersebut menjadi lebih buruk. Ini adalah metode cerdas yang dirantai ke asumsi buruk, bahwa bising tetap diam. Ruangan asli tidak melakukannya. Anda dapat membaca lebih lanjut tentang keluarga teknik klasik di gambaran umum pengurangan bising umum.

Bagaimana pengurangan bising AI benar-benar bekerja

Berikut perubahannya. Alih-alih ambang volume yang tetap atau jejak bising yang tetap, pengurangan bising pembelajaran mesin dilatih pada jumlah besar ucapan bersih yang sengaja dicampur dengan ribuan jenis bising. Selama pelatihan itu, model belajar, dengan cara umum, seperti apa ucapan manusia di spektrum dan seperti apa semua yang bukan ucapan. Kemudian, pada audio Anda, ia memperkirakan bingkai demi bingkai energi mana yang bersuara dan mana yang merupakan bising, menyimpan suara, dan menekan sisanya.

Perhatikan apa yang tidak diperlukan. Ia tidak memerlukan Anda untuk sampel bising terlebih dahulu, karena ia telah mempelajari gagasan umum bising dari pelatihan. Ia tidak menganggap bising stabil, karena ia memutuskan ulang setiap bingkai audio pendek. Dan yang paling penting, karena ia telah mempelajari bentuk suara itu sendiri daripada menghafal satu bising tertentu, ia dapat menarik ke bawah suara yang secara efektif tidak pernah didengarnya sebelumnya. Itulah apa yang dibeli generalisasi. Klik keyboard, sirene yang lewat, pintu dibanting, anjing menggonggong, bahkan orang lain berbicara di latar belakang semuanya ditekan sementara suara Anda tetap di depan, karena tidak ada satupun yang cocok dengan gambar internal model tentang ucapan Anda.

Dibingkai secara teknis, ini adalah masalah pemisahan sumber: model mencoba untuk memisahkan sinyal campuran kembali ke bagian-bagiannya dan memberi Anda hanya yang Anda inginkan. Bingkai ini juga menjelaskan batasan kemudian, karena pemisahan menjadi lebih sulit semakin banyak dua sumber tumpang tindih.

Mengapa “dipelajari suara” mengalahkan “disampel bising”

Metode lama bereaksi terhadap bising. Pengurangan bising AI mengenali suara. Inversi ini adalah mengapa alat yang sama menangani kipas, keyboard mekanis, dan pengipas daun tanpa mengubah satu pengaturan pun. Anda tidak lagi menggambarkan bising. Anda mengandalkan mengetahui apa suara Anda seharusnya terdengar dan memperlakukan sisanya sebagai dapat dihilangkan. Ketika orang mengatakan denoiser terdengar “cerdas”, inilah yang mereka dengarkan: pembersihan yang mengikuti suara Anda daripada mengikuti aturan tetap.

Ini juga keluarga teknologi yang sama banyak kreator sudah mengandalkan untuk pekerjaan lain, dari peningkat audio yang menghilangkan bising latar belakang sebagai bagian dari alur kerja dua langkah hingga tugas yang lebih khusus. Posting ini memiliki caranya; yang satu memiliki alur kerjanya, jadi tidak perlu mengulanginya di sini.

Live vs offline: anggaran latensi yang membentuk denoise AI

Dua alat pengurangan bising AI dapat menggunakan ide inti yang sama dan masih berperilaku sepenuhnya berbeda, karena satu batasan: berapa lama mereka diizinkan berpikir. Ini adalah hal paling berguna untuk dipahami saat Anda memilih alat.

Pembersihan offline dapat mampu menjadi berat

Ketika Anda membersihkan file yang sudah selesai, latensi tidak masalah. Alat dapat melihat ke depan audio yang datang nanti, melihat kembali apa yang terjadi sebelumnya, menjalankan model yang lebih besar, dan membuat beberapa lintasan. Melihat konteks di kedua sisi momen membuat pemisahan jauh lebih akurat, karena model dapat menggunakan apa yang terjadi selanjutnya untuk memutuskan apa suara sekarang. Inilah sebabnya pembersihan audio AI offline pada rekaman cenderung terdengar lebih bersih dan lebih alami daripada ide yang sama berjalan langsung. Anda menukar kecepatan untuk kualitas, dan tidak ada yang perlu dikorbankan karena audio sudah ada.

Denoise real-time berjalan di stopwatch

Audio langsung, panggilan, saluran Discord, aliran, adalah kebalikannya. Model harus memproses setiap bingkai suara kecil dalam beberapa milidetik, dan ia tidak dapat mengintip audio masa depan karena audio itu belum terjadi. Ia harus kausal dan cepat. Untuk mencapai anggaran itu, denoise AI real-time menjalankan model yang lebih kecil, lebih ringan dan sengaja lebih lembut. Ia masih menghilangkan bising latar belakang yang stabil dengan bersih, tetapi tidak akan mengejar kasus paling sulit seagresif lintasan offline, karena terlambat lebih buruk daripada meninggalkan sedikit bising. Jika suara Anda tiba seperempat detik setelah mulut Anda, panggilan tidak dapat digunakan, tidak peduli seberapa bersih.

Tradisional (gerbang / spektral)Pengurangan bising AI
Memutuskan berdasarkanVolume atau jejak bising tetapModel yang dipelajari suara vs bising
Bekerja saat Anda berbicaraGerbang: tidak. Spektral: sebagianYa
Menangani bising baru yang tidak disampelTidakYa, digeneralisasi
Artefak tipikalPompa, bising musikSuara bawah air jika didorong berlebihan
Perlu Anda sampel bisingSpektral: yaTidak
Rumah terbaikDengung sederhana, dapat diprediksiRuangan berantakan dan berubah

Apa yang dapat dan tidak dapat dilakukan pembersihan audio AI

Pengurangan bising AI adalah lompatan nyata, bukan sihir. Mengetahui mode kegagalannya di depan menghemat Anda dari mengejar rekaman yang sempurna senyap yang tidak ada dan merusak pengambilan yang baik saat mencoba.

Itu menambahkan sedikit warna pada suara Anda

Setiap denoiser berjalan garis antara menghilangkan bising dan mempertahankan sinyal Anda, karena suara dan bising berbagi beberapa frekuensi yang sama. Tarik bising ke bawah dan Anda hampir selalu menarik sepotong suara dengannya. Pada pengaturan yang masuk akal ini halus, penipisan atau penggalian yang samar. Ini adalah biaya pemisahan, dan biasanya pertukaran yang adil untuk latar belakang yang bersih.

Dorong terlalu keras dan Anda mendapatkan artefak bawah air

Putar kekuatan sepenuhnya dan model mulai menghilangkan frekuensi yang benar-benar milik suara Anda. Hasilnya adalah suara bawah air atau berair klasik: tersedak, bergelombang, robotis, seperti Anda berbicara melalui akuarium. Ini adalah kesalahan nomor satu yang dilakukan orang dengan denoise AI. Perbaikannya sederhana dan berlawanan dengan intuisi: gunakan lebih sedikit. Kembalikan kekuatan sampai bising lebih tenang tetapi tidak hilang. Sedikit dengungan sisa yang hampir tidak Anda perhatikan mengalahkan suara yang terdengar rusak.

Itu menghancurkan musik

Arahkan pengurangan bising AI ke lagu dan itu akan mencoba menekan musik seolah-olah itu adalah bising, mengrusak instrumen dan vokal. Itu adalah alat yang salah. Memisahkan suara dari trek backing adalah pekerjaan berbeda, disebut pemisahan stem, dan menggunakan model yang dibangun khusus untuk membagi vokal dari instrumen daripada suara dari bising. Jika itu adalah tujuan Anda, gunakan pemisah stem vokal yang tepat, bukan denoiser. Menggunakan pengurangan bising pada musik seperti menggunakan roller lint pada lukisan basah.

Itu berjuang dengan suara yang tumpang tindih

Kasus paling sulit untuk penghapusan bising AI apa pun adalah orang lain berbicara. Kipas tinggal di bagian berbeda dari spektrum dari suara Anda, jadi mudah untuk dipisahkan. Suara manusia kedua menempati frekuensi yang sama dengan suara Anda, jadi model tidak dapat dengan jelas memutuskan yang mana untuk disimpan. Alat yang baik mendorong bising latar belakang ke bawah dan dapat membuatnya jauh kurang mengganggu, tetapi jangan mengharapkan kafe yang ramai menghilang di belakang Anda.

Memilih penghapusan bising AI berdasarkan skenario

Alat yang tepat sepenuhnya tergantung pada apa yang Anda lakukan. Tidak ada satu denoiser terbaik, hanya yang terbaik untuk situasi Anda. Berikut cara memilih, cocok dengan dua batasan di atas, langsung versus offline, dan jenis bising.

SkenarioPendekatan terbaikMengapa
Panggilan Discord atau obrolan suaraPenekanan bising AI real-timeLatensi rendah, membunuh bising ruangan stabil langsung
Streaming langsung atau gameplayPenekanan real-time di mikrofonAudio bersih tanpa pekerjaan pasca
Podcast atau file voiceoverPembersihan audio AI offlineModel lebih berat, lihat ke depan, hasil lebih bersih
Dengung cepat pada rekamanPengurangan spektral (Audacity)Gratis, cepat, bagus untuk dengung stabil
Suara terkubur dalam laguPemisahan stem, bukan denoisePekerjaan berbeda, model berbeda
Ledakan tiba-tiba, pukulan pintuBisukan mikrofon jika memungkinkanTransien mengalahkan sebagian besar penekanan

Jalur keputusan sederhana

  1. Apakah Anda sudah memiliki file atau audio berangkat langsung sekarang?
  2. Jika langsung, Anda menginginkan penekanan bising AI real-time, disetel lembut untuk melindungi latensi.
  3. Jika itu file, gunakan pembersihan offline dan biarkan berjalan lebih berat untuk lintasan yang lebih bersih.
  4. Jika bising adalah lagu lain di bawah suara, berhenti, itu pemisahan stem.
  5. Jika itu satu transien keras seperti pukulan, membisukan selama gangguan mengalahkan filter apa pun.

Jawab pertanyaan pertama dengan jujur dan empat lainnya jatuh ke tempat. Sebagian besar frustrasi dengan alat bising datang dari mengambil pembersih file offline untuk masalah langsung, atau penekan langsung untuk pekerjaan yang memerlukan lintasan offline berat.

Pengurangan bising AI real-time untuk panggilan dan aliran

Jika masalah Anda langsung, panggilan, aliran, sesi Discord, maka pengurangan bising AI real-time adalah kategori yang Anda inginkan, dan di sinilah penekanan bising bawaan VoxBooster cocok. Ini berjalan di PC Windows Anda sebagai proses lokal perangkat, membersihkan bising latar belakang stabil dari mikrofon Anda sebelum mencapai aplikasi apa pun yang Anda gunakan. Karena menggunakan mikrofon virtual untuk merutekan audio yang sudah diproses ke program apa pun, aliran yang sama bersih mencapai apa pun yang Anda arahkan.

Perutean itu adalah bagian praktis yang orang lewatkan. Audio yang ditekan menjadi mikrofon normal yang dapat dipilih oleh aplikasi apa pun, jadi langsung ke pengaturan pengubah suara Discord atau aliran OBS tanpa plugin khusus di masing-masing. Anda membersihkan mikrofon sekali dan setiap aplikasi hilir mendengar versi bersih. Semuanya tetap pada mesin Anda, yang penting jika Anda lebih suka umpan mikrofon mentah Anda tidak pernah meninggalkan PC Anda. VoxBooster adalah salah satu opsi dalam bidang yang ramai, dan untuk skenario langsung khusus, desain pada perangkat, rute di mana saja adalah keuntungan utamanya. Penetapan harga tinggal di halaman harga daripada di sini.

Untuk separuh offline dari pembagian, membersihkan file yang sudah Anda rekam, Anda tidak memerlukan mesin langsung itu. Lintasan offline yang lebih berat, apakah editor gratis atau pembersih khusus, akan mengalahkan alat real-time pada rekaman yang sudah selesai setiap saat, karena alasan latensi di atas.

FAQ

Apa itu pengurangan bising AI ?

Pengurangan bising AI adalah pembersihan audio yang dilakukan oleh model yang dilatih untuk membedakan ucapan manusia dari semua yang lain. Alih-alih membisukan bagian yang sunyi atau mengurangkan jejak bising tetap, ia telah mempelajari bentuk suara, sehingga dapat mengurangi bising bahkan saat Anda secara aktif berbicara, bukan hanya di celah diam.

Bagaimana cara kerja pengurangan bising AI ?

Model dilatih pada jumlah besar ucapan bersih yang dicampur dengan berbagai jenis bising hingga ia belajar memisahkan keduanya. Saat runtime, ia memperkirakan bagian mana dari audio masuk yang merupakan suara dan mana yang merupakan bising, kemudian menyimpan suara dan menekan sisanya, bekerja bingkai demi bingkai dalam potongan pendek.

Apakah pengurangan bising AI lebih baik daripada gerbang bising ?

Untuk sebagian besar pekerjaan suara, ya. Gerbang bising hanya membisukan audio di bawah ambang batas volume, jadi bising masih mengalir di bawah suara Anda saat Anda berbicara. Pengurangan bising AI memisahkan suara dari bising berdasarkan konten, sehingga mengurangi bising bahkan selama berbicara, bukan hanya selama jeda di antara kata-kata.

Bisakah pengurangan bising AI menghilangkan suara latar belakang ?

Kadang-kadang, sebagian. Karena model telah mempelajari seperti apa ucapan secara umum, orang lain berbicara jauh lebih sulit dibersihkan daripada kipas, karena suara kedua berbagi frekuensi yang sama dengan Anda. Alat yang baik mendorong bising latar belakang ke bawah secara nyata tetapi jarang menghapusnya dengan bersih tanpa menyentuh suara Anda sendiri.

Mengapa suara saya terdengar bawah air setelah denoise AI ?

Itu diproses terlalu banyak. Ketika kekuatan didorong terlalu tinggi, model menghilangkan frekuensi yang benar-benar milik suara Anda, meninggalkan suara berair, berat, bawah air. Kembalikan kekuatan sampai bising lebih tenang tetapi tidak hilang ; sedikit dengungan sisa hampir selalu mengalahkan suara yang rusak, robotis.

Apakah pengurangan bising AI bekerja secara real-time ?

Ya, tetapi dengan anggaran yang lebih ketat. Model real-time harus memproses setiap bingkai dalam beberapa milidetik tanpa melihat audio masa depan, jadi mereka berjalan lebih kecil dan lebih lembut daripada alat offline. Pertukaran itu membuat panggilan dan aliran latensi rendah sambil tetap menghilangkan bising latar belakang stabil dari umpan mikrofon langsung Anda dengan bersih.

Bisakah pengurangan bising AI menghilangkan musik dari rekaman suara ?

Tidak dengan baik. Pengurangan bising memperlakukan musik sebagai bising dan mencoba menekannya, yang merusak lagu dan suara di bawahnya. Memisahkan vokal dan instrumen adalah pekerjaan berbeda yang disebut pemisahan stem, dan menggunakan jenis model yang berbeda yang dibangun khusus untuk tugas itu.

Kesimpulan

Pengurangan bising AI mendapatkan reputasinya karena alasan konkret: berhenti bereaksi terhadap bising dan mulai mengenali suara. Inversi tunggal itu adalah mengapa menangani ruangan berantakan dan berubah yang menghancurkan gerbang bising dan pengurangan spektral, dan mengapa digeneralisasikan ke suara yang tidak pernah disampelnya. Ini bukan sihir, meskipun. Itu menambahkan sedikit warna pada suara Anda, itu mengubah audio Anda menjadi bawah air saat Anda mendorong terlalu keras, dan tidak dapat menarik suara dari lagu. Cocokkan alat dengan pekerjaan: pembersihan offline untuk file yang sudah selesai, penekanan real-time untuk apa pun yang berangkat langsung, dan pemisahan stem saat musik terlibat.

Jika masalah Anda adalah yang langsung, audio bersih dalam panggilan, Discord, atau aliran, penekanan bising real-time VoxBooster adalah opsi pada perangkat yang layak untuk dicoba, dengan uji coba penuh tiga hari dan tanpa kartu kredit. Unduh VoxBooster.

Coba VoxBooster — uji coba gratis 3 hari.

Kloning suara real-time, soundboard, dan efek — di mana pun kamu sudah biasa bicara.

  • Tanpa kartu kredit
  • ~30ms latensi
  • Discord · Teams · OBS
Coba gratis 3 hari