Yuk kenalan dengan Tonn SDK v2: Pasca-produksi Audio bertenaga AI untuk Film, TV, dan Iklan

Sejak 2023, platform Tonn telah memproses lebih dari lima juta trek musik melalui mesin mixing dan mastering kami. Hari ini, kami meluncurkan Tonn SDK v2, modul post-production yang dirancang khusus untuk membawa kecerdasan audio yang sama ke alur kerja film, televisi, streaming, iklan, dan podcast.

Ini bukan alat musik yang dipakai ulang. Ini adalah pipeline pemrosesan yang benar-benar baru, dirancang mengikuti cara kerja post-production yang sebenarnya: mengutamakan dialog, patuh pada spesifikasi delivery, dan dibangun untuk format yang dibutuhkan broadcaster dan platform.

Modul post-production ini sudah tersedia sekarang di Tonn C++ SDK, dengan ketersediaan cloud API menyusul dalam beberapa minggu ke depan.

Mengapa post-production butuh pendekatan baru

Audio post-production punya masalah konsistensi. Setiap proyek memiliki campuran dialog, musik, efek suara, foley, dan ambience yang berbeda, dan setiap platform delivery punya spesifikasi loudness sendiri. Membuat mix terdengar pas dan lolos QC untuk Netflix, YouTube, TV siaran, dan bioskop berarti berjam-jam kerja manual untuk tiap deliverable.

Kami membangun Tonn SDK v2 untuk membuat proses itu bisa diprogram. Satu panggilan API. Loudness yang tepat. Delivery yang sesuai standar. Stems yang sudah diproses kalau Anda membutuhkannya.

Apa saja isinya

Jenis track post-production native

SDK ini berbicara dalam bahasa post-production secara native, dengan 10 kategori track khusus: Dialogue (utama dan sekunder), Music, SFX, Ambience, Foley, ADR, Voiceover (varian nada rendah dan nada tinggi), serta kategori serbaguna. Artinya, engine pemrosesan benar-benar paham apa yang sedang dikerjakannya dan memperlakukan dialog secara berbeda dari musik latar atau track foley.

Peningkatan dialog cerdas

Tiga mode pemrosesan yang disesuaikan untuk jenis konten berbeda:

• Preserve untuk dokumenter dan konten naturalistik, di mana intervensi minimal menjaga karakter aslinya tetap utuh

• Enhance untuk TV standar, streaming, dan konten wawancara, dengan peningkatan kejernihan tanpa pemrosesan berlebihan

• AD Enhanced untuk iklan, pengumuman, dan voiceover, mendorong keterpahaman sejauh mungkin

Di balik layar, engine melakukan deteksi noise floor, analisis keseimbangan frekuensi, analisis clipping, dan profiling reverb sebelum menerapkan pemrosesan apa pun. Ia menyesuaikan diri dengan apa yang didengarnya.

Pencocokan ADR dengan sound lokasi

Salah satu tugas tersulit dalam post-production adalah membuat dialog hasil rekaman ulang (ADR) terdengar alami saat disandingkan dengan sound lokasi asli. DialogueMatcher milik SDK menganalisis respons frekuensi, dinamika, timbre, dan karakteristik reverb dari rekaman asli, lalu menerapkan pemrosesan pencocokan pada take ADR. Hasilnya dikembalikan sebagai skor kemiripan, jadi Anda bisa memverifikasi kecocokannya secara programatis.

Automatic sidechain ducking

Audio latar (musik, SFX, ambience) otomatis di-duck saat dialog terdeteksi. Lima preset mencakup skenario umum, mulai dari pengurangan halus -6 dB untuk musik latar hingga potongan agresif -20 dB untuk narasi di atas score. Mode kustom penuh memberi Anda kendali atas kedalaman pengurangan, attack, dan release. Ducking multi-track didukung, jadi satu sidechain dialog bisa mengontrol beberapa track latar sekaligus.

Tujuh preset format delivery

Setiap preset dikalibrasi untuk standar delivery tertentu dengan target loudness, batas true peak, dan batas LRA (Loudness Range):

Output-nya mencakup laporan kepatuhan lulus/gagal yang meliputi loudness program, loudness dialog, true peak, LRA program, dan LRA dialog. Anda bisa menampilkannya langsung ke pengguna akhir atau mengirimkannya ke pipeline QC Anda.

Output stems yang diproses

Secara opsional, ekspor stems yang diproses satu per satu bersama mix final. Berguna untuk QC, revisi, dan pekerjaan editorial lanjutan.

Akselerasi GPU

Pemrosesan dipercepat dengan GPU di macOS (Metal) dan Linux (CUDA), dengan fallback otomatis ke CPU saat GPU tidak tersedia.

Dengar aksinya

Berikut dua contoh sebelum-sesudah yang menunjukkan modul post-production ini bekerja.

Contoh 1: Spot iklan

Contoh ini menggunakan profil delivery Ad Mix dengan sidechain ducking aktif, memakai track dialog sebagai sumber sidechain. Tahap mastering menargetkan EBU R128 untuk iklan.

Contoh 2: Animasi untuk streaming

Contoh ini menggunakan profil delivery streaming tanpa ducking. Mastering menargetkan spesifikasi loudness platform streaming besar.

Tersedia sekarang di C++ SDK. Cloud API segera hadir.

Modul post-production ini hadir hari ini di Tonn C++ SDK lengkap dengan dokumentasi penuh, aplikasi contoh, dan template konfigurasi JSON untuk alur kerja umum.

Kami akan membawa kemampuan ini ke cloud API kami dalam beberapa minggu ke depan. Layanan post-production akan memakai sistem kredit yang sama seperti API musik kami yang sudah ada, jadi pelanggan mana pun yang punya kredit API bisa langsung memakai endpoint baru ini. Tidak perlu paket atau lisensi terpisah.

Langkah berikutnya

Kami punya roadmap yang jelas untuk memperluas modul post-production:

• Peluncuran cloud API dalam beberapa minggu ke depan, dimulai dengan peningkatan dialog, mastering format delivery, dan kepatuhan loudness

• Endpoint pipeline penuh, termasuk sidechain ducking, pencocokan ADR, dan mix post-production gabungan, tak lama setelahnya

• Dukungan audio surround dan imersif ada di roadmap kami (metadata format delivery sudah membawa field surround dan jumlah channel)

Kalau Anda sedang membangun alat untuk post-production, broadcast, podcast, atau platform video, kami dengan senang hati ingin ngobrol. Dokumentasi SDK sudah live, dan Anda bisa mendaftar untuk akses API di tonn-portal.roexaudio.com.

Tonn SDK dan API dibangun oleh RoEx, perusahaan teknologi audio di balik Automix dan Mix Check Studio. Kami telah memproses lebih dari 5 juta track sejak 2023.