Microsoft mematenkan perangkat AI dengan kamera mata ikan dan beberapa mikrofon

Microsoft telah sering menyoroti pentingnya AI di masa lalu, bahkan memperkirakan berbagai aplikasi untuk berkontribusi $ 5 triliun untuk pertumbuhan PDB global dalam beberapa tahun ke depan. Banyak kemitraan perusahaan dalam beberapa bulan terakhir juga telah berpusat di bidang yang sama.

Sekarang, paten Microsoft baru yang diterbitkan bulan ini telah muncul, menampilkan sistem AI dengan kamera mata ikan tunggal dan beberapa mikrofon.

Kamera Fisheye memiliki lensa khusus yang memungkinkan mereka memantau tampilan 360 derajat penuh. Meskipun teknologinya tidak baru dengan cara apa pun, Microsoft berencana untuk menggabungkannya dengan perangkat ambient capture dengan cara yang berbeda. Sistem ambient capture seperti itu biasanya memiliki beberapa kamera untuk memperluas bidang pandang mereka. Ini membutuhkan desain yang rumit dan juga menghasilkan kebutuhan akan perangkat keras tambahan untuk memadukan beberapa aliran data audiovisual.

Contoh perangkat tangkap

Dengan demikian, Microsoft telah mengusulkan kamera fisheye yang menghadap ke atas untuk digunakan dengan perangkat ini, bersama dengan array mikrofon. Ini akan menyelesaikan kesulitan yang terkait dengan menangkap objek bergerak, atau fokus pada pergerakan objek tunggal di antara beberapa target. Banyak teknik telah dijelaskan mengenai penempatan perangkat keras. Sebagai contoh, sebagian besar mikrofon dapat ditempatkan dalam pola melingkar atau heksagonal, dengan satu tempat lain di titik pusat di bidang yang sama. Demikian pula, diinginkan untuk kamera mata ikan yang akan ditempatkan di dekat array mikrofon, serta ke permukaan lantai atau meja, sehingga dapat menangkap data secara optimal.

Model fusi juga dapat berfungsi sebagai bagian dari sistem ini, menggunakan algoritma pembelajaran mendalam untuk mendapatkan intuisi yang lebih baik mengenai data audio dan visual yang dikumpulkannya. Sebagai contoh, jaringan saraf berulang jangka panjang (LSTM) berulang dapat digunakan. Melalui sifatnya yang melekat, jaringan semacam ini dapat menyimpan informasi kontekstual dan historis, membuat analisis apa pun yang dilakukan jauh lebih berguna untuk kasus penggunaan di masa mendatang.

Sistem AI dengan perangkat tangkap dan server cloud

Berdasarkan model yang dijelaskan, perlu dicatat bahwa penggunaan perangkat bisa lebih diperluas, seperti untuk mengenali ucapan dari pembicara manusia yang teridentifikasi. Ini pada dasarnya berarti bahwa teknologi tersebut dapat digabungkan dengan asisten digital seperti Cortana juga. Microsoft mencatat bahwa pengaturan yang dijelaskan dapat memungkinkan asisten digital untuk merekam informasi yang lebih kaya berkaitan dengan lingkungan mereka, sementara secara bersamaan mengenali dan bertindak berdasarkan isyarat suara dan video kualitas tinggi yang diterima dari pengguna dengan relatif mudah. Kamera fisheye dan array mikrofon akan berfungsi sebagai bagian integral dari aplikasi ini. Data yang dikumpulkan dari ini dapat mengambil keuntungan dari model LSTM tersebut untuk melakukan analisis atau fusi lebih lanjut dalam server cloud AI, setelah menyimpannya dalam bentuk terkompresi secara lokal.

Namun, penyebaran sistem tidak hanya terbatas pada asisten digital. Salah satu teknik yang dijelaskan dapat memungkinkannya untuk bekerja dengan PC, tablet, ponsel, dan banyak lagi. Either way, semenarik kedengarannya, tidak ada jaminan Microsoft berencana untuk memperkenalkan perangkat tersebut dalam waktu dekat, jika sama sekali.