Terjemahan ucapan dalam satu langkah
Cara umum menerjemahkan video adalah pipeline dua tahap: transkripsikan ucapan dalam bahasa aslinya, lalu masukkan teksnya ke mesin penerjemah. Setiap tahap menambahkan kesalahannya sendiri, dan tahap kedua hanya melihat kata-kata, bukan cara kata-kata itu diucapkan.
Alat ini mengambil jalan yang lebih pendek. Whisper, model suara di baliknya, dilatih bukan hanya untuk mentranskripsi tetapi juga untuk menghasilkan bahasa Inggris langsung dari audio berbahasa asing; sekitar 125.000 jam data pelatihannya adalah pasangan semacam itu, yaitu ucapan non-Inggris dengan teks bahasa Inggris. Dalam mode terjemahan, model mendengarkan rekaman dan menulis dalam bahasa Inggris, tanpa transkrip perantara dalam bahasa aslinya.
Ini memberi beberapa keuntungan praktis:
- Penanda waktu tetap melekat pada teks bahasa Inggris. Setiap segmen terjemahan mempertahankan waktu mulai dan selesai dari ucapan asalnya, jadi hasil SRT dan VTT selaras dengan video.
- Tidak ada kesalahan yang menumpuk. Dalam pipeline dua tahap, kata yang salah dengar menjadi terjemahan yang salah dengan penuh keyakinan; di sini model bekerja dari suaranya langsung, jadi tidak ada transkrip cacat yang dijadikan dasar oleh penerjemah.
- Satu tugas, satu kali menunggu. Anda mendapat teks atau subtitle bahasa Inggris dari satu kali unggah.
Konsekuensinya, bahasa tujuan sudah tetap: Whisper hanya menerjemahkan ke bahasa Inggris.
Penggunaan yang cocok dan titik lemahnya
Alat ini bekerja baik untuk memahami isi dan publikasi ringan:
- Mengikuti presentasi konferensi, kuliah, atau wawancara yang direkam dalam bahasa yang tidak Anda kuasai.
- Menambahkan subtitle bahasa Inggris ke klip pendek untuk penonton internasional.
- Menangkap inti pesan suara, potongan berita, atau video pelanggan sebelum memutuskan apakah perlu penerjemah profesional.
Ketahui di mana ia kesulitan:
- Nama diri dan istilah. Nama orang, tempat, dan produk bisa diterjemahkan harfiah atau salah eja. Periksa sebelum dipublikasikan.
- Idiom dan humor. Ungkapan baku kadang diterjemahkan kata per kata.
- Ucapan campur bahasa. Ketika pembicara berganti bahasa di tengah kalimat, sebagian bisa keluar tanpa diterjemahkan atau terlewat.
- Sesekali ada bagian yang tidak diterjemahkan. Sesekali satu segmen tetap dalam bahasa aslinya. Memilih bahasa yang diucapkan secara eksplisit alih-alih membiarkannya di Deteksi Otomatis membuat hal ini lebih jarang.
- Rekaman yang sudah berbahasa Inggris. Rekaman seperti ini hanya ditranskripsi, jadi tidak ada gunanya diproses di sini; gunakan transkripsi saja.
Memilih format hasil
Tiga format tersedia, dan teks bahasa Inggris juga muncul di halaman ketika tugas selesai, siap disalin:
- TXT menempatkan setiap frasa terjemahan di barisnya sendiri, tanpa penanda waktu. Paling cocok untuk membaca, catatan, kutipan, dan menempel ke dokumen.
- SRT adalah pilihan aman untuk subtitle: editor video, pemutar desktop, dan sebagian besar formulir upload menerimanya.
- VTT untuk video HTML5 di situs web, di mana elemen
<track>hanya menerima VTT.
Untuk menampilkan subtitle bahasa Inggris, tambahkan SRT sebagai track subtitle di editor atau pemutar Anda, atau letakkan di samping video dengan nama file yang sama. Jika subtitle ternyata meleset satu atau dua detik, atau nanti Anda butuh format lain, Konversi SRT ke VTT dan sebaliknya bisa menggeser waktunya dan beralih antara SRT dan VTT.
Menyiapkan file
Video dan audio sama-sama diterima: MP4, MOV, MKV, dan WebM, ditambah MP3, WAV, dan M4A. Hanya suaranya yang dipakai, jadi video besar bisa diganti dengan track audionya agar unggahan lebih cepat. Rekaman layar 300 MB biasanya menjadi 10 sampai 15 MB sebagai MP3, dan terjemahannya tetap sama.
Pengenalan memakan waktu kira-kira sama dengan durasi rekaman, dan batas gratis diukur dalam menit audio, bukan megabyte. Jika rekaman lebih panjang dari batas Anda, potong di jeda yang alami dan terjemahkan bagian-bagiannya satu per satu, agar tidak ada kalimat yang terpotong di perbatasan.
Pemrosesan berlangsung di server kami karena modelnya terlalu besar untuk dijalankan di tab browser. File yang diunggah dihapus begitu hasilnya siap, dan hasilnya sendiri kedaluwarsa otomatis dalam sekitar satu jam, jadi segera unduh atau salin.