Google Translate: Suara masa nyata dan AI untuk memecahkan halangan bahasa

Informatec Digital » Sumber » Google Translate: Suara masa nyata dan AI untuk memecahkan halangan bahasa

Melancong, bekerja dengan pasukan antarabangsa atau sekadar menonton video dalam bahasa lain menjadi semakin biasa, dan dalam semua senario ini, halangan bahasa tidak lagi dapat diatasi hanya dengan kamus atau penterjemah asas . Google sedang mengambil langkah penting ke hadapan dengan Google Translate dengan mengintegrasikan sepenuhnya kecerdasan buatan Gemini dan model lain seperti PaLM 2 untuk menjadikan terjemahan teks dan suara lebih semula jadi, lancar dan berguna dalam kehidupan seharian.

Apa yang dahulunya merupakan penterjemah yang bekerja hampir perkataan demi perkataan kini bercita-cita untuk menjadi sejenis penterjemah peribadi yang memahami konteks, nada dan juga intonasi perbualan . Tambahan pula, Google memanfaatkan teknologi yang sama ini, tidak seperti platform lain seperti DeepL , untuk menawarkan alat latihan bahasa dalam aplikasi, mengubah Translate menjadi sesuatu yang lebih dekat dengan tutor peribadi daripada utiliti mudah untuk keperluan harian.

Google Translate bergantung pada Gemini dan PaLM 2 untuk lebih memahami bahasa tersebut

Dengan ketibaan Gemini, Google telah mereka bentuk semula cara penterjemahnya memproses bahasa, bergantung pada model bahasa dan rangkaian saraf : ia bukan lagi sekadar menggantikan istilah, tetapi mentafsirkan maksud dan konteks penuh ayat . Ini membolehkan idiom, kolokialisme dan kolokialisme diterjemahkan dengan lebih dekat dengan cara penutur asli bahasa sasaran akan menterjemahkannya.

Dalam praktiknya, ini bermakna Google Translate dapat mengesan bila sesuatu frasa tidak sepatutnya diterjemahkan secara literal, tetapi sebaliknya dengan padanan yang sesuai dengan budaya . Satu contoh biasa ialah ungkapan bahasa Inggeris seperti "stealing my thunder," yang cuba diterjemahkan oleh AI dengan makna sebenar dan bukan sebagai rentetan perkataan yang tidak masuk akal yang tidak akan disebut oleh sesiapa pun dalam bahasa Sepanyol.

Penambahbaikan ini amat ketara dalam terjemahan teks antara bahasa Inggeris dan hampir dua puluh bahasa lain, termasuk bahasa Sepanyol, Cina, Jepun, Jerman dan Hindi . Google telah mula melancarkan penambahbaikan ini di Amerika Syarikat dan India, baik dalam aplikasi mudah alih mahupun versi web dalam Google Chrome dan akan meluaskannya secara beransur-ansur ke pasaran lain apabila model diperhalusi dengan lebih banyak data dan maklum balas pengguna.

Selain Gemini, Google juga telah memanfaatkan potensi PaLM 2, model bahasa dengan keupayaan berbilang bahasa yang sangat canggih yang telah meningkatkan bilangan bahasa yang disokong oleh Google Translate secara mendadak. Hasil daripada enjin ini, syarikat itu telah menambah 110 bahasa baharu, daripada Kantonis, ciri yang telah lama diminta, kepada bahasa minoriti seperti Manx dan bahasa komuniti peribumi.

PaLM 2 telah digunakan untuk mengenal pasti bahasa yang berkaitan dan memudahkan latihan apabila data terhad , contohnya, dalam kes Awadhi dan Marwadi. Walaupun tidak semua bahasa baharu mempunyai ciri yang sama (seperti terjemahan kamera, terjemahan suara atau teks-ke-pertuturan), lonjakan ini penting kerana ia memberi perkhidmatan kepada lebih daripada 614 juta orang, kira-kira 8% daripada populasi dunia.

Terjemahan suara masa nyata: perbualan yang lebih semula jadi

Salah satu perubahan yang paling menarik ialah terjemahan suara masa nyata yang direka untuk perbualan bersemuka . AI mendengar, menterjemah dan memaparkan hasilnya hampir serta-merta dan tidak perlu menekan butang atau membaca skrin setiap kali seseorang bercakap.

Google Translate kini menyertakan mod "terjemahan langsung" yang menyalin apa yang diperkatakan oleh penutur dan memaparkannya dalam kedua-dua bahasa pada skrin . Secara serentak, ia memainkan audio yang diterjemahkan, membolehkan anda mengikuti tanpa perlu sentiasa membaca setiap baris teks seolah-olah ia adalah sari kata yang berterusan.

Untuk mencapai matlamat ini, Google menggunakan model pengecaman pertuturan lanjutan yang direka untuk mengasingkan bunyi dan mengurangkan hingar latar belakang . Ini amat berguna dalam persekitaran yang mencabar seperti kafe, lapangan terbang, stesen kereta api atau mana-mana ruang yang sesak, di mana banyak sistem pengecaman pertuturan sebelum ini bergelut untuk membezakan antara suara dan hingar.

Ciri terjemahan serentak melalui aplikasi ini tersedia, dalam fasa pertamanya, kepada pengguna di Amerika Syarikat, India dan Mexico, dengan sokongan untuk lebih daripada 70 bahasa . Ini termasuk bahasa global utama seperti Sepanyol, Arab, Perancis, Hindi, Korea dan Tamil, menjadikannya alat yang sangat versatil untuk pelancongan, kerja jarak jauh dan latihan.

Idea yang mendasarinya ialah, dalam situasi kehidupan sebenar—temu janji doktor, mesyuarat dadakan, meminta arahan atau berunding di kedai— jeda, aksen dan perubahan intonasi juga harus dicerminkan dalam terjemahan . Gemini cuba melaraskan irama suara yang disintesis dan mengekalkan, seboleh-bolehnya, nada penutur asal, menjadikan perbualan terasa kurang seperti robot.

Fon kepala sebagai penterjemah peribadi: Terjemah Langsung di telinga anda

Walaupun terjemahan pada skrin sudah praktikal, langkah seterusnya adalah lebih bercita-cita tinggi: membawa terjemahan suara terus ke mana-mana fon kepala . Google telah memperhalusi ciri ini supaya ia tidak lagi bergantung pada peranti proprietari seperti Pixel Buds, tetapi boleh berfungsi dengan hampir semua model yang disambungkan ke telefon anda.

Ia berfungsi secara agak mudah: pengguna menyambungkan fon kepala mereka ke telefon, membuka Google Translate dan mengaktifkan mod Terjemahan Langsung atau "Terjemahan Masa Nyata" . Kemudian mereka memilih bahasa yang ingin diterjemahkan—atau membiarkan aplikasi mengesannya secara automatik—menghalakan telefon ke arah pembesar suara dan membiarkan AI melakukan tugasnya.

Semasa penutur bercakap dalam bahasa mereka, Gemini memproses audio, menterjemahkannya dan menghantarnya ke fon kepala, melapiskan suara yang diterjemahkan ke atas bahasa asal . Pada masa yang sama, pengguna melihat transkrip dialog dalam kedua-dua bahasa pada skrin, yang membantu semakan perbendaharaan kata atau mengukuhkan pemahaman jika mempelajari bahasa tersebut.

Menurut Google, sistem ini dioptimumkan untuk mengekalkan nada, penekanan dan irama suara asal , menjadikan pengalaman kurang "robotik" dan lebih seperti seorang jurubahasa manusia membisikkan terjemahan di telinga anda. Ciri ini amat menarik untuk mesyuarat perniagaan, lawatan berpandu, persidangan atau situasi di mana membaca secara berterusan dari telefon anda tidak selesa.

Dalam fasa pertama ini, terjemahan masa nyata melalui mana-mana alat dengar dilancarkan sebagai beta terhad untuk Android di Amerika Syarikat, Mexico dan India , dengan sokongan untuk lebih 70 bahasa. Google telah mengesahkan bahawa ciri yang sama akan tiba pada iPhone melalui aplikasi Google Translate, tetapi keserasian iOS dirancang untuk tahun 2026, jadi pengguna Apple perlu menunggu sedikit lagi.

Latihan bahasa dengan AI: daripada penterjemah kepada rakan pembelajaran

Google bukan sahaja mahu Translate berguna untuk keperluan semasa melancong atau memahami e-mel penting; ia juga bertujuan untuk mengubah aplikasi tersebut menjadi platform untuk pembelajaran dan latihan bahasa yang diperibadikan . Itulah sebabnya ia telah menambah alat berkuasa AI khusus untuk meningkatkan perbualan dan pemahaman mendengar.

Salah satu ciri baharu ialah mod latihan perbualan yang diperibadikan di mana pengguna boleh mensimulasikan situasi kehidupan sebenar . Daripada sembang tidak formal dengan rakan atau keluarga kepada konteks yang lebih formal seperti temu duga kerja, belajar di luar negara atau mesyuarat kerja, AI menjana dialog yang disesuaikan dengan matlamat khusus setiap orang.

Apabila anda membuka aplikasi pada peranti mudah alih anda, anda boleh memilih bahasa yang digunakan untuk memaparkan penjelasan dan bahasa yang ingin anda praktikkan , serta memilih tahap: asas, pertengahan atau lanjutan. Tahap ini boleh diubah suai dari semasa ke semasa apabila pengguna maju, dan aplikasi akan melaraskan kesukaran aktiviti secara automatik.

Alat ini mengintegrasikan aktiviti pemahaman mendengar dan bertutur, dengan latihan berpandukan AI yang memberikan pembetulan dan panduan . Pengguna mendengar dialog, menjawab soalan, mengulang frasa atau berinteraksi dengan senario simulasi yang dijana oleh sistem, yang menawarkan cadangan untuk perbendaharaan kata, struktur tatabahasa dan ungkapan yang lebih semula jadi.

Anda juga boleh mengetik perkataan tertentu dalam dialog untuk melihat maksud atau variasi penggunaannya , membolehkan anda memperhalusi pemahaman anda dan belajar dengan lebih aktif. Tambahan pula, aplikasi ini menjejaki kemajuan anda dan mencadangkan matlamat harian atau mingguan, sama seperti platform pembelajaran bahasa lain, membantu anda kekal bermotivasi dalam jangka masa panjang.

Buat masa ini, mod pembelajaran ini masih dalam versi beta untuk penutur bahasa Inggeris yang ingin belajar bahasa Sepanyol atau Perancis , dan untuk penutur bahasa Sepanyol, Perancis dan Portugis yang ingin meningkatkan kemahiran bahasa Inggeris mereka. Google telah menyatakan bahawa ia akan mengembangkan bahasa dan kombinasi tersebut sambil mengumpulkan data penggunaan dan memperhalusi model perbualan yang terlibat.

Pengembangan besar-besaran bahasa dan ciri-ciri berdasarkan bahasa

Peningkatan AI bukan sahaja meningkatkan kualiti terjemahan, tetapi juga telah meluaskan rangkaian bahasa yang tersedia, termasuk bahasa yang mempunyai sedikit penutur atau sedang menjalani pemulihan . Ini mempunyai kesan langsung kepada komuniti yang sebelum ini mempunyai sedikit alat teknologi yang disesuaikan dengan realiti linguistik mereka.

Penambahan 110 bahasa baharu dengan bantuan PaLM 2 merangkumi bahasa yang digunakan secara meluas hinggalah bahasa yang kurang dikenali, termasuk bahasa peribumi dan bahasa minoriti dengan sedikit penutur asli . Teknologi ini membolehkan sokongan diskalakan walaupun jumlah data yang tersedia untuk melatih model adalah terhad.

Google menekankan bahawa, bagi kebanyakan bahasa ini, keutamaan adalah untuk menghormati usaha pemulihan dan pemeliharaan budaya , menggunakan Translate sebagai alat sokongan untuk dokumentasi, pendidikan dan komunikasi antara generasi. Kehadiran mereka di Translate dapat memberikan rangsangan yang ketara kepada keterlihatan mereka dalam persekitaran digital.

Walau bagaimanapun, syarikat itu juga menjelaskan bahawa tidak semua ciri tersedia dalam semua bahasa baharu . Terjemahan kamera, terjemahan suara dan teks-ke-pertuturan mungkin mengambil masa yang lebih lama untuk dilancarkan ke sesetengah bahasa, kerana ia memerlukan model pengecaman tulisan tangan, fonetik dan sintesis pertuturan tertentu.

Walaupun dengan batasan awal ini, strateginya jelas: untuk terus menggabungkan bahasa secara beransur-ansur, secara progresif mengembangkan set fungsi yang berkaitan . AI memungkinkan untuk merangkumi spektrum linguistik yang lebih luas dengan setiap model dan kitaran latihan baharu, tanpa terlalu bergantung pada populariti atau bilangan penutur setiap bahasa.

Kesan terhadap pelancongan, perniagaan dan perkhidmatan penting

Peningkatan terjemahan dan kedatangan komunikasi suara masa nyata bukan sekadar kemajuan teknologi yang menarik; ia mempunyai akibat langsung terhadap cara orang ramai dan organisasi berkomunikasi dalam dunia global . Sektor seperti pelancongan, penjagaan kesihatan, pendidikan dan perdagangan antarabangsa sudah mendapat manfaat daripada alat ini dengan cara yang sangat ketara.

Bayangkan, sebagai contoh, perjalanan ke negara yang bahasanya anda tidak tahu: dengan terjemahan langsung dan fon kepala, anda boleh berbual dengan pemandu teksi, penyambut tetamu hotel atau pemandu pelancong tanpa memerlukan penterjemah profesional. Ia tidak sempurna, tetapi ia dapat mengurangkan geseran dalam situasi seharian dengan ketara.

Dalam dunia perniagaan, Google Translate dan keupayaan baharunya diletakkan sebagai alat sokongan untuk khidmat pelanggan berbilang bahasa, mesyuarat antarabangsa dan latihan dalaman . Walaupun jurubahasa manusia masih digunakan dalam persekitaran yang sangat kritikal, AI boleh mengendalikan banyak interaksi berisiko rendah dengan kualiti yang lebih daripada boleh diterima.

Google sendiri membentangkan penambahbaikan ini sebagai sebahagian daripada strategi yang lebih luas untuk mendemokrasikan AI perbualan dan kontekstual dalam menghadapi pesaing seperti Microsoft, Apple dan Meta . Walaupun Google Translate mengutamakan kebolehcapaian dan integrasi umum merentasi peranti yang berbeza, Microsoft banyak memberi tumpuan kepada persekitaran korporat, Apple pula memberi tumpuan kepada privasi dalam ekosistem tertutup dan integrasi natifnya, dan Meta meneroka terjemahan dalam peranti boleh pakai dan realiti imbuhan.

Dalam perkhidmatan awam, pendidikan dan penjagaan kesihatan, keupayaan untuk menterjemah perbualan dalam masa nyata ke dalam lebih 70 bahasa hanya dengan telefon bimbit dan fon kepala boleh membuat perbezaan yang ketara. Ini merangkumi bantuan kepada pesakit yang tidak bertutur dalam bahasa tempatan hinggalah memudahkan akses kepada bahan pendidikan atau prosedur pentadbiran yang penting.

Secara keseluruhannya, semua ciri baharu ini mengubah Penterjemah daripada penukar frasa pantas yang mudah kepada platform komprehensif yang merangkumi terjemahan mesin, amalan bahasa dan sokongan untuk komunikasi profesional dan peribadi . Dan semua ini dikuasakan oleh AI Gemini dan PaLM 2, yang memproses teks, suara dan juga kandungan visual dalam beberapa kes.

Evolusi Google Translate menjelaskan bahawa terjemahan mesin telah berubah daripada sekadar bantuan terhad dan literal kepada sistem yang semakin hampir dengan pemahaman bahasa manusia, di mana konteks, nada, irama suara dan matlamat pengguna sama pentingnya dengan perkataan itu sendiri , membawa kita sedikit lebih dekat kepada idea untuk dapat memahami hampir sesiapa sahaja, walau apa pun bahasa yang mereka tuturkan.