Bagaimana RoEx Automix bekerja dengan canggih

Dalam postingan ini, kami akan mengintip di balik layar teknologi RoEx Automix kami untuk memberikan Anda ide tentang bagaimana kami memperlakukan audio Anda sehingga menghasilkan mix yang terdengar profesional dan seimbang dalam hitungan menit, bukan hari.

Merevolusi Audio dengan AI Music Mixing dan Mastering

Bidang audio mixing penuh dengan kompleksitas. Menyeimbangkan beragam komponen suara adalah tantangan yang dihadapi oleh insinyur suara di seluruh dunia. Salah satu masalah utama adalah 'masking', fenomena ketika sumber suara, misalnya pukulan drum, menjadi tidak terdengar karena ada elemen yang lebih keras, seperti gitar bas. Untuk mengatasi ini, insinyur menggunakan berbagai teknik dan efek audio, menciptakan mix yang harmonis dan seimbang di mana setiap suara memiliki kehadiran yang jelas.

Menyetel dengan sempurna tingkat volume, mengelola posisi stereo atau 'panning', dan menerapkan equalisasi (EQ) untuk memodulasi frekuensi tertentu merupakan langkah kritis. Kompresi rentang dinamis (DRC), sebuah teknik yang digunakan untuk mengontrol kekerasan sumber suara, juga memainkan peran signifikan. Namun bayangkan jika proses rumit ini bisa diotomatisasi, menghilangkan campur tangan manual dan mengurangi kemungkinan kesalahan.

Selamat datang di dunia AI Music Mixing, di mana kecerdasan buatan memainkan peran maestro. AI dalam sistem mixing dan mastering audio memperlancar dan meningkatkan proses mixing, menghasilkan audio berkualitas tinggi yang seimbang dengan sempurna. Bergabunglah dengan kami saat kami menjelajahi dunia yang menakjubkan dari mixing dan mastering audio otomatis yang didukung oleh AI, dan mengeksplorasi masa depan produksi musik.

Sistem Mixing Kami

Automix, sistem mixing musik AI inovatif kami, mendefinisikan ulang mixing audio dengan mengotomatisasi proses kompleks dalam menentukan pengaturan efek audio yang sempurna. Ini secara teliti menjaga keseimbangan spasial, meminimalkan masking, dan mengatur kerasnya suara yang dirasakan di seluruh audio multitrack yang dikirim untuk mixing.

Dengan memanfaatkan teknik pencarian informasi musik (MIR) yang canggih, Automix menganalisis secara mendalam setiap trek atau stem dalam konteks semua trek/stem lain yang mempengaruhinya. Tahap analisis ini berlangsung di 'Multitrack Analysis Module', seperti dicontohkan dalam gambar di atas. Di sini, kami menganalisis dan mengekstrak sejumlah besar fitur audio multitrack, beberapa di antaranya bisa diproses secara real-time, memberikan potensi untuk mixing audio real-time.

Fitur multitrack yang diekstrak dari setiap trek/stem kemudian dimasukkan ke dalam model AI yang memahami aturan rekayasa mix yang sudah ada. Model ini memahami pengaturan yang paling sesuai untuk volume, EQ, DRC, Panning, dan Reverb berdasarkan karakteristik sonik dari setiap trek/stem yang dikirimkan, interaksinya, dan gaya musiknya. Akibatnya, Automix menunjukkan kemampuan yang cakap untuk mencampur stem individu dan multitrack penuh secara efektif.

Setelah penentuan akhir model tentang pengaturan audio multitrack terbaik, pengaturan ini - EQ, DRC, panning, dan kerasnya - diterapkan pada setiap trek/stem. Audio multitrack kemudian digabungkan dan dinormalkan untuk puncak pada -3dBFs untuk menyediakan headroom yang dibutuhkan untuk mastering.

Selain itu, kami telah mengembangkan modul mastering berdasarkan teknologi serupa, meskipun penggunaannya optional. Modul ini memperhitungkan audio yang telah dimix dan preferensi kerasnya pengguna untuk menerapkan rantai sinyal mastering AI kami. Produk akhirnya adalah file wave, FLAC, atau mp3, yang sepenuhnya dioptimalkan dan siap untuk didistribusikan di platform seperti Spotify, Soundcloud, atau Bandcamp.

Memperkenalkan API Kami: Tonn - Mendukung AI Music Mixing dan Mastering

Kami menampung teknologi Automix revolusioner kami di Google Cloud Platform (GCP) yang kuat sebagai bagian dari Tonn API kami. Ini beroperasi sebagai aplikasi containerize yang dapat diskalakan, mampu menyesuaikan dengan jumlah mix yang dibutuhkan dalam waktu tertentu. Fleksibilitas ini memungkinkan kami untuk meningkatkan kapasitas secara efektif untuk mengimbangi permintaan yang meningkat dan memenuhi kebutuhan unik pelanggan kami. Selain itu, ini memungkinkan aplikasi eksternal untuk memulai beberapa tugas mixing secara bersamaan, mempercepat proses mixing dari proyek multitrack yang besar secara signifikan.

Marilah kita mengambil contoh praktis untuk menggambarkan ini: bayangkan multitrack yang terdiri dari 40 trek - 10 trek gitar, 10 trek drum, 10 trek string, dan 10 trek synth. Dengan Tonn API kami, pengguna dapat membuat tugas mixing untuk setiap kelompok instrumen agar dapat berjalan bersamaan. Setelah mixing individu dari gitar, drum, string, dan synth selesai, pengguna kemudian dapat menyusun final mix dan trek mastering dari mix ini, seperti dicontohkan dalam gambar di atas.

Benchmark kami saat ini menggunakan Tonn API menunjukkan bahwa teknologi RoEx Automix kami dapat mencampur delapan track dengan durasi tiga menit masing-masing (durasi lagu pop biasa) dalam waktu sekitar 4,5 menit. Kami terus berusaha untuk meningkatkan kinerja ini. Jika Anda tertarik untuk merasakan kekuatan Tonn API secara langsung, silakan hubungi kami untuk mendapatkan kunci API. Anda dapat menemukan dokumentasi Tonn API di sini.

RoEx Realtime Mix: AI Music Mixing untuk Aplikasi Real-Time

Berdasarkan teknologi transformatif di balik Automix, kami saat ini sedang mengembangkan RoEx Realtime Mix - sistem yang dirancang untuk menghadapi tantangan audio real-time. Ia dilengkapi untuk menangani beberapa saluran audio sekaligus, menganalisis setiap saluran, dan menerapkan efek audio dengan segera, dengan tujuan mengurangi masking dan meningkatkan kejelasan auditori.

Ideal untuk aplikasi seperti siaran langsung, video game, atau VR, di mana berbagai sumber suara berinteraksi secara dinamis seiring waktu, RoEx Realtime Mix dapat beradaptasi dan merespons stimulasi yang berubah. Misalnya, jika karakter utama dalam video game berbicara, sistem secara otomatis akan menonjolkan ujarannya sambil menyaring suara lain secara halus untuk meminimalkan masking.

Kesimpulan: Masa Depan Produksi Musik dengan AI Music Mixing

Produksi musik tradisional atau 'mixing' adalah proses yang memerlukan tenaga kerja intensif yang membutuhkan keahlian berbeda dari penciptaan musik. Biasanya melibatkan berbagai sumber suara, masing-masing dihasilkan dalam lingkungan yang unik dan dengan atribut yang berbeda, tujuannya adalah untuk memungkinkan setiap sumber terdengar jelas, berkontribusi pada paduan suara yang harmonis dan jernih. Mencapai keseimbangan ini adalah tantangan dan biasanya membutuhkan keahlian insinyur suara profesional.

Namun, hadirnya alat produksi musik otomatis seperti Automix mengubah lanskap ini. Dengan memanfaatkan kekuatan AI music mixing, alat ini menangani aspek-aspek kompleks dari produksi musik, memungkinkan para musisi untuk menyampaikan konten mereka kepada audiens dengan lebih cepat, mudah, dan efektif dibanding jika mereka harus melakukan mixing dan mastering sendiri atau menyerahkannya kepada layanan profesional.

Teknologi ini menurunkan hambatan untuk memasuki industri musik, membuat karier di bidang musik lebih terjangkau bagi mereka yang kurang memiliki latar belakang teknis. Seiring kami melangkah maju, sistem AI music mixing dan mastering seperti RoEx Automix menjanjikan untuk mendemokratisasi produksi musik, membuka pintu ekspresi kreatif baru bagi seniman di seluruh dunia.