 ingin AR dapat direkam, dan dianotasi dengan cerdas

Bersamaan dengan semua pekerjaan Apple di AR   , dan "  Glass", terkait pengalaman langsung,   ingin pengguna dapat merekam, mengedit, dan kemudian melihat AR - bersama dengan ekstra yang dibuat secara otomatis.

  sebelumnya telah meneliti cara merekam AR - dan memutar kembali rekaman tersebut pada perangkat 2D seperti iPad.  Secara terpisah, itu juga menyelidiki perekaman audio AR, dan itu sudah termasuk pengeditan VR di Final Cut Pro.  Sekarang terus mengeksplorasi cara mencapai AR yang dapat direkam dan berguna, dalam sepasang aplikasi paten yang baru terungkap.

"Perekam Realitas yang Dibuat Komputer", adalah yang pertama, dan ini menyangkut berbagai masalah dalam menangkap pengalaman AR / VR 360 derajat.  Tidak hanya ada sejumlah besar data untuk direkam dari satu orang yang memakai headset, ada juga masalah yang melibatkan banyak orang.

  tidak menyelesaikan semua ini dalam aplikasi paten ini, tetapi ini membantu karena ini benar-benar tentang merekam bagian yang sangat spesifik dari pengalaman AR.  Ini tentang menentukan bagian mana yang diminati pengguna, dan kemudian menangkapnya.

"Teknologi subjek mengidentifikasi, setidaknya sebagian berdasarkan pada setidaknya satu dari preferensi pengguna atau peristiwa yang terdeteksi, wilayah yang diminati atau objek yang diminati dalam perekaman konten," kata   .  "Berdasarkan setidaknya sebagian pada wilayah minat atau objek minat yang diidentifikasi, teknologi subjek menghasilkan versi rekaman konten yang dimodifikasi."

Contoh yang diberikan terutama berkaitan dengan olahraga, sehingga pengguna mungkin tertarik secara khusus untuk mengikuti satu pemain.  Apa pun yang dilakukan pemain lain, dan apa pun yang dipilih pengguna untuk ditonton pada saat itu, sistem dapat menangkap apa yang dilakukan pemain ini.

Kemudian rekaman secara otomatis dapat menambahkan lebih banyak informasi ke dalam adegan.

L-R adegan AR, objek diidentifikasi, lalu objek dianotasi

L-R adegan AR, objek diidentifikasi, lalu objek dianotasi

"Akibatnya, informasi elektronik tampak seperti bagian dari lingkungan fisik seperti yang dirasakan oleh pengguna," lanjut Apple.  "Ditambah itu bisa mencakup antarmuka pengguna untuk berinteraksi dengan informasi elektronik yang terhampar di lingkungan fisik yang ditingkatkan."

Ini mirip dengan penelitian   sebelumnya di mana "  Glass", atau perangkat lain, dapat menampilkan informasi perbandingan untuk pembeli.  Pegang dua item dan   AR akan menampilkan informasi terkait tentang keduanya.

Ini semua tentang berhasil mencampurkan objek atau informasi virtual, dengan kenyataan - dan kemudian merekamnya untuk diputar kembali nanti.  "Fitur putar ulang lingkungan realitas yang dihasilkan komputer termasuk video dua dimensi (2D) untuk berbagi dan pemutaran," kata   .

Alternatifnya, perekaman "selanjutnya menghasilkan representasi tiga dimensi (3D) yang menggabungkan informasi dari semua sensor dan / atau menggabungkan perekaman dengan rekaman pengguna lain (misalnya, sudut pandang berbeda (POV) dan / atau bidang pandang berbeda (FOV)  ), "lanjut permohonan paten.

Mampu menentukan tempat menarik, dan menafsirkan kenyataan untuk mengetahui tempat menampilkan informasi, berarti menyadari kedekatan, posisi, dan jarak.  Setelah sistem dapat secara efektif memilih objek tertentu dalam pemandangan, sistem juga dapat mengubah objek tersebut.

Menyembunyikan objek sensitif dalam rekaman AR

Permohonan paten kedua yang baru terungkap terkait perekaman AR berkaitan dengan pengubahan objek dalam sebuah adegan ketika objek tersebut dalam beberapa hal sensitif.  "Memberikan batasan dalam rekaman realitas yang dibuat komputer," mirip dengan penelitian sebelumnya di mana video dapat secara otomatis mengaburkan logo atau elemen lain dalam konferensi video langsung.

Itu berkaitan dengan objek dalam ruang 2D, di mana aplikasi paten baru ini untuk 3D nyata atau virtual dalam AR atau VR.

Menurut   , proposal ini melibatkan "menganalisis rekaman konten dalam bidang pandang perangkat," dan mengenali "sekumpulan objek yang termasuk dalam konten."

"Teknologi subjek mengidentifikasi subset dari kumpulan objek yang diindikasikan sebagai terkait dengan konten yang dilindungi," lanjut aplikasi paten.  Tidak ada diskusi tentang apa yang termasuk konten yang dilindungi, karena itu bukan keputusan teknis, ini adalah keputusan editorial.

Objek yang diidentifikasi dapat disunting atau diburamkan

Siapa pun yang memutuskan bahwa apa pun itu "konten yang dilindungi", sistem dapat mengidentifikasi objek dan melakukan sesuatu terhadapnya.  "Teknologi subjek menghasilkan versi rekaman yang dimodifikasi yang mengaburkan atau memfilter subset dari kumpulan objek," kata   .

Dengan kata lain, ini membuat objek menjadi buram, atau menyuntingnya, mungkin seperti yang disukai oleh pengguna.

Ini sekali lagi diterapkan selama pengalaman AR langsung, tetapi aplikasi paten juga menetapkan bahwa "versi rekaman yang dimodifikasi" dikirim ke "aplikasi host untuk diputar" nanti.

Kedua paten ini memiliki dua penemu yang sama, Ranjit Desai, dan Maneli Noorkami.  Paten kedua juga diberikan kepada Joel N. Kerr.

Karya Desai, sebelum bergabung dengan   pada 2016, termasuk paten untuk Philips terkait sistem pengambilan gambar yang dapat mengidentifikasi objek dan orang yang menggunakan histogram warna.

Teknologi kamera yang akan diadopsi iPhone mendatang

by MatriX, iDevice Indonesia