Bagaimana audio mengaktifkan konten next-gen di smartphones

Sejak peluncuran smartphone pertama lebih dari satu dekade lalu, tim R&D, insinyur dan desainer industri telah terjebak dalam pertempuran peningkatan inovasi dengan kecepatan yang meningkat.

Konsumen telah melihat teknologi di perangkat mereka berubah dengan cepat. Mereka sekarang memiliki akses ke kemampuan dan kemampuan komputasi yang hanya baru-baru ini dianggap tidak mungkin untuk dicapai dalam faktor bentuk yang ramping. Kami sekarang menggunakan kecerdasan buatan setiap hari untuk menemukan rute terbaik untuk bekerja. Kami dapat melakukan streaming film terbaru hampir secara instan.

Beberapa lompatan terbesar ke depan ada pada kamera yang terpasang pada perangkat ini. Dari gambar kasar hanya sedikit lebih dari satu dekade lalu, kita sekarang dapat mengambil gambar dan video berkualitas 4K, ditambah dengan AI untuk menghasilkan konten kelas profesional.

Semakin lama, tim Litbang juga telah menyadari kemungkinan mengintegrasikan teknologi sensorik yang ditingkatkan ke dalam smartphones. Ini terbukti dalam tren AR dan game saat ini, tetapi juga semakin meningkat pada sensor tradisional seperti mikrofon. Dalam hal audio, salah satu misi hari ini adalah untuk mencocokkan kemampuan audio dengan pencitraan definisi tinggi dan kemampuan video di kamera saat ini.

Kemampuan audio membuka pengalaman generasi berikutnya

Selain melepas jack audio tradisional, inovasi dalam audio smartphone telah terbatas dalam beberapa tahun terakhir.

Pada umumnya, fokusnya adalah pada peningkatan kualitas keseluruhan. Namun pengalaman audio belum berubah secara signifikan sejak zaman Walkman atau pemutar MP3 – stereo yang terbaik, tetapi seringkali masih mono, dan beberapa pilihan dalam menyesuaikan pemutaran.

Konsumen seringkali juga bergantung pada pembelian perangkat keras eksternal untuk meningkatkan kejelasan pemutaran. Dalam beberapa tahun terakhir kami telah melihat tren sambutan di speaker pintar dan peningkatan kualitas bicara dan audio smartphones, Yang jelas merupakan langkah ke arah yang benar.

Sebagian besar peningkatan pada audio perangkat sebagian besar terbatas pada pemutaran konten profesional. Ada peluang bagi tim R&D inovatif untuk memikirkan kembali pengalaman audio dan mencocokkan ini dengan apa yang dapat dicapai melalui pengambilan gambar dan video.

Melalui mengintegrasikan teknologi sensorik dan perangkat lunak pintar, pembuat perangkat dapat secara radikal merancang ulang pengalaman audio – memberikan lebih banyak kontrol kepada pengguna atas cara mereka menangkap audio. Mari kita lihat dua contoh:

1. Algoritma audio pintar yang memungkinkan penangkapan audio spasial juga dapat mengaktifkan fungsionalitas zoom audio. Bekerja seperti lensa telefoto untuk audio, kemampuan zoom memungkinkan pengguna untuk mengisolasi dan lebih dekat ke sumber suara yang diinginkan, menenggelamkan suara yang tidak diinginkan,
2. Teknologi yang sama juga dapat membuka kunci kemampuan untuk secara dinamis melacak sumber suara yang bergerak, serta penindasan otomatis suara yang tidak diinginkan, seperti suara angin. Bahkan editing adegan suara paska penangkapan sekarang dapat diimplementasikan, memberikan kontrol yang lebih besar atas adegan yang ditangkap, menciptakan kemungkinan praktis yang tak terbatas ketika sampai pada bagaimana kita menceritakan kisah kita.

Bayangkan orang tua menghadiri permainan sekolah anaknya. Secara historis, Anda harus bergulat dengan akustik yang buruk dan suara-suara yang mengganggu dari penonton, sambil juga menerima bahwa kualitas suara yang ditangkap akan dibatasi oleh jarak Anda dari panggung (belum lagi pengiriman aktor muda yang gelisah).

Saat ini, teknologi audio inovatif mampu mengurangi keadaan ini untuk memberikan kemampuan yang belum pernah ada sebelumnya kepada pengguna. Sementara penangkapan audio spasial akan mereproduksi adegan suara dalam pemutaran, itu tidak mengatasi masalah kebisingan sekitar, juga tidak memungkinkan Anda untuk lebih dekat dengan tindakan. Di sinilah kemampuan zoom audio dan pelacakan masuk.

Menggunakan antarmuka kamera smartphone, pengguna sekarang dapat memperbesar audio bersama dengan video, sambil secara bersamaan menghilangkan suara ambient tempat – kursi menyeret, percakapan di aula dan anak-anak gelisah di penonton. Lebih jauh dari ini, seseorang dapat memilih dan secara dinamis melacak aktor utama, yang memungkinkan kinerjanya ditangkap dengan detail penuh, bersemangat, dan jernih.

Menikah dengan perangkat keras dan perangkat lunak pada tahap Litbang

Kemampuan ini dicapai melalui perangkat lunak yang bekerja dengan perangkat keras. Itu tidak memerlukan penemuan kembali yang signifikan dari faktor bentuk saat ini. Tapi itu memang membutuhkan hubungan yang erat antara insinyur dan perancang perangkat.

Bekerja dengan tim desain, insinyur perangkat lunak, dan tim R&D dapat menyelaraskan algoritma yang menangkap audio spasial dengan spesifikasi unik dari faktor bentuk perangkat. Kemitraan erat ini penting, karena penempatan mikrofon pada telepon pintar akan berkontribusi pada kualitas aplikasi yang dihasilkan. Ini juga akan memutuskan kemampuan apa yang bisa dicapai.

Meskipun penempatan optimal tidak selalu mungkin tanpa mengorbankan faktor bentuk, ini sebagian besar dapat diatasi pada tahap awal R&D. Menggunakan pengukuran laboratorium akustik, algoritma audio yang menganalisis dan memproses beberapa sinyal mikrofon dapat dikalibrasi ke penempatan tertentu. Ini sangat membantu menjaga integritas faktor bentuk dan juga menentukan kemampuan apa yang bisa dibuat.

Ini juga harus bekerja secara harmonis dengan kekuatan komputasi perangkat. Ini dapat mencakup integrasi dengan mesin AI untuk memungkinkan pengenalan objek untuk suara, memberikan pengguna kemampuan untuk memfokuskan suara atau menghilangkan kebisingan latar belakang yang mengganggu.

Sementara demokratisasi akses ke audio immersif adalah setengah dari persamaan, memastikan kemudahan penggunaan untuk kemampuan ini adalah komponen penting lainnya. Antarmuka pengguna yang efektif adalah aset inti lainnya – perlu intuitif seperti cara kita menggunakan video capture hari ini. Sekali lagi, perancang perangkat lunak harus bekerja sama dengan R&D dan insinyur untuk memastikan kemampuan ini dapat dengan mudah digunakan.

Kebutuhan akan konten yang benar-benar mendalam

Pabrikan perangkat harus mempertimbangkan mengapa dan bagaimana orang menggunakannya smartphones untuk berkomunikasi hari ini. Dalam dunia digital yang penuh dengan saluran sosial di mana kita semua setiap hari berbagi kehidupan kita, pentingnya teknologi yang kita gunakan untuk menangkap dan berbagi momen penting tidak dapat dilebih-lebihkan.

Ini diilustrasikan oleh fakta bahwa hampir 60% pengguna internet mengunggah dan berbagi video online hari ini, sementara hampir 80% dari semua pemirsa video digital menggunakan konten ini melalui smartphones.

Memberikan pengalaman baru seharusnya bukan tentang bereaksi terhadap permintaan. Itu harus tentang menetapkan standar untuk inovasi. Mengaktifkan cara menghubungkan media digital yang lebih bermakna, baik itu konten yang dibuat pengguna atau profesional, harus menjadi fokus utama bagi produsen ponsel cerdas.

Mengembangkan teknologi sensorik yang menangkap gambar paling benar dari lingkungan kita adalah kuncinya. Ini karena ketika kita tidak tenggelam dalam streaming serial TV terbaru, kita adalah pendongeng. Perangkat yang memungkinkan kami untuk membuat tingkat baru perendaman, memperdalam koneksi ke keluarga, teman, dan audiens yang lebih luas, memberdayakan kami sebagai pendongeng.

Pabrikan perangkat asli yang memahami peran audio dalam memajukan konten digital kemungkinan akan tetap selangkah lebih maju dari pesaing mereka. Mereka akan memimpin dalam memberikan produk yang menawarkan diferensiasi pasar yang sebenarnya.

Ini semakin penting dalam pembuktian di masa depan terhadap bentuk-bentuk baru konten digital dan tren teknologi. Teknologi seluler baru, seperti 5G, serta kemampuan yang berkembang dari realitas virtual dan augmented diatur untuk membuka pengalaman yang lebih mendalam. Teknologi audio canggih ini akan menjadi bahan utama dalam menghadirkannya.

Jyri Huopaniemi adalah Kepala Perizinan Teknologi di Teknologi Nokia.