Key Takeaway
- Navi menggunakan SharePlay, dan pertuturan-ke-teks terbina dalam Apple, untuk menawarkan sari kata dan terjemahan dalam FaceTime.
- Ia jauh dari sempurna tetapi sudah cukup bagus.
- Sari kata bagus untuk kebolehaksesan.
Navi ialah apl yang menambahkan sari kata langsung dan terjemahan masa nyata, pada panggilan FaceTime anda.
Apl ini menggunakan SharePlay dan Pengecaman Pertuturan terbina dalam untuk menambah sari kata dan terjemahan dalam 20 bahasa pada panggilan FaceTime anda. Ia merupakan penggunaan SharePlay yang luar biasa, yang kebanyakan kita anggap sebagai cara gimik untuk menonton filem yang disegerakkan dengan orang di tempat lain. Anda mungkin tidak perlu memecat penterjemah anda lagi, tetapi apl yang melakukan ini dengan baik mungkin sangat berguna.
"Saya tidak mendapat audio daripada panggilan FaceTime," tulis pemaju Navi Jordi Bruin di Twitter, "tetapi menggunakan SharePlay untuk berkongsinya di kalangan peserta dalam panggilan."
SharePlay
SharePlay ialah ciri baharu dalam iOS 15 dan macOS 12.1 yang membolehkan anda berkongsi dan menyegerakkan perkara dalam panggilan FaceTime. Dengan contoh menonton filem di atas, mana-mana peserta boleh menjeda atau memainkan filem, contohnya, semasa anda semua berbual dalam panggilan FaceTime. Video FaceTime kekal terbuka dalam panel gambar dalam gambar yang kecil, terapung, dan setiap peserta menjalankan apl secara setempat pada peranti mereka. Helah SharePlay adalah untuk menyegerakkan apa sahaja yang berlaku dalam apl tempatan ini, jadi semua orang berkongsi pengalaman, sama ada filem, senaman Fitness+ atau hamparan.
Navi menggunakan teknologi yang sama, cuma apl dalam panggilan bukan filem-ia adalah enjin terjemahan masa nyata. Untuk menggunakannya, anda melancarkan aplikasi semasa dalam panggilan FaceTime dan ketik butang 'Hidupkan Sari Kata'. Kemudian, peserta lain juga boleh menyertai aksi dan melihat sari kata langsung untuk pembesar suara semasa. Jika seseorang bermonolog, gelembung pertuturan mereka akan tumbuh dan melekat lebih lama.
Bagi orang pekak, ini mungkin bermakna perbezaan antara memanggil orang atau tidak. Dan bagi sesiapa sahaja, ini bermakna anda boleh mengadakan perbualan yang berguna antara orang yang tidak berkongsi bahasa.
Teks Universal
Internet dibina atas teks, dan itu bagus. Ia kecil dan mudah untuk dibuat, dibaca dan menterjemah. Ia juga mudah untuk bertukar menjadi pertuturan yang disintesis. Hasilnya ialah sesiapa sahaja dari mana-mana sahaja boleh mengambil bahagian dalam sebarang perbualan. Bahasa bukan penghalang, begitu juga pekak atau apa-apa jenis buta-selagi anda menggunakan peranti dengan alat kebolehcapaian yang baik untuk gangguan penglihatan atau pendengaran.
Tetapi perkataan yang diucapkan adalah lebih sukar untuk diproses. Imlak pertuturan ke teks sangat mengagumkan, tetapi baru-baru ini pengecaman pertuturan umum telah menjadi cukup baik untuk kegunaan umum-apl Terjemahan Apple ialah contoh yang baik. Diperkenalkan dalam iOS 15, ia menawarkan terjemahan audio masa nyata. Jika kami masih pergi bercuti di luar negara, ia akan menjadi sempurna.
Kini kami semakin banyak menggunakan video untuk kerja dan untuk terus berhubung dengan rakan dan keluarga. Tidak kira bagaimana kami bekerja pada masa hadapan, halangan untuk membuat panggilan video telah dipecahkan sepenuhnya. Ia kini merupakan alat biasa, tetapi ia tidak mempunyai banyak kemahiran alat komunikasi bertulis.
Sesuatu seperti Navi, yang menawarkan sari kata dan terjemahan masa nyata, mungkin penting. Kebolehcapaian ialah satu aspek, tetapi kebolehan untuk berbual dengan orang yang anda tidak bercakap bahasanya membuka perniagaan antarabangsa ke tahap yang mengejutkan.
Dalam Tindakan
Saya menguji Navi dengan pembangun apl, pengarang dan pengguna alat bantu pendengaran Graham Bower. Ia agak bagus tetapi belum bersedia untuk tugasan kritikal. Beberapa transkripsi adalah komik yang buruk dan terlalu kesat untuk dikaitkan. Walau bagaimanapun, apabila perbualan kami berterusan, ia menjadi lebih baik untuk mengenali ucapannya dengan tepat. Itu masuk akal kerana enjin imlak iOS menyesuaikan diri dengan suara anda dari semasa ke semasa.
Terjemahan juga berjaya, walaupun kualiti terjemahannya bergantung pada ketepatan input.
Mudah untuk menayangkan teknologi jenis ini ke dalam Apple Glasses masa depan atau apa sahaja produk AR/VR yang dikhabarkan sedang berfungsi minggu ini.
"Saya dapat melihat ini berfungsi dalam cermin mata AR," kata Bower semasa perbualan kami. "Sesetengah orang, walaupun dengan pendengaran biasa, lebih suka sari kata dalam filem. Ini akan menjadi seperti sari kata untuk kehidupan sebenar."
Walaupun demo teknologi yang mengagumkan, Navi belum ada lagi. Untuk kegunaan perniagaan yang boleh dipercayai, pengecaman pertuturan awal Apple perlu mendapatkan lebih tepat. Tetapi dari segi kelajuan, tidak mengapa dan terjemahannya juga bagus.
Tetapi kita berada di laluan sekarang, dan perkara seperti ini akan menjadi lebih baik.
