Sony memamerkan sensor gambar kombinasi pertama dan chip AI

Sony memamerkan sensor gambar kombinasi pertama dan chip AI

 

 

Sony memamerkan sensor gambar kombinasi pertama dan chip AI

Sony memamerkan sensor gambar kombinasi pertama dan chip AI

Sony telah mengembangkan teknologi hybrid baru yang menarik: Sensor gambar dengan sistem pemrosesan AI yang

dibangun ke dalam perangkat keras , menjadikannya sebuah sistem terintegrasi tunggal. Manfaat dan aplikasi untuk ini berpotensi sangat besar karena pencitraan dan kode terus bergabung .

Idenya cukup sederhana dalam konsep. Anda mengambil sensor gambar CMOS tradisional seperti yang akan Anda temukan di ponsel atau kamera apa pun hari ini dan menumpuknya di atas chip logika yang dibangun tidak hanya untuk menarik piksel dari sensor tetapi untuk mengoperasikan model pembelajaran mesin yang mengekstraksi informasi dari piksel tersebut .

Hasilnya adalah perakitan elektronik tunggal yang dapat melakukan banyak pemrosesan menarik pada foto sebelum foto itu dikirim ke tempat lain, seperti papan logika utama, GPU atau cloud.

Agar jelas, sensor gambar sudah memiliki prosesor pendamping yang melakukan pekerjaan menyortir piksel, mengompresnya menjadi JPEG, dan sebagainya. Tapi mereka sangat fokus melakukan beberapa tugas umum dengan sangat cepat.

The Sonychip, sebagaimana dijelaskan perusahaan, mampu melakukan proses dan output yang lebih canggih. Sebagai contoh, jika eksposur adalah anjing di lapangan, chip dapat segera menganalisanya untuk objek, dan alih-alih mengirim gambar penuh, cukup laporkan “anjing,” “rumput” dan apa pun yang dikenali.

Hal ini juga dapat melakukan pengeditan yang pada dasarnya improvisasi, seperti memotong semua yang ada di foto

tetapi bagian-bagian yang dikenali dan diperintahkan untuk dilaporkan – hanya bunga-bunga, tetapi tidak pernah batangnya, katakan.

Manfaat dari sistem semacam itu adalah ia dapat membuang semua jenis data yang tidak perlu atau tidak diinginkan sebelum data tersebut masuk ke penyimpanan atau pemrosesan pipa perangkat utama. Itu berarti lebih sedikit daya prosesor yang digunakan, untuk satu hal, tetapi mungkin juga lebih aman dan lebih aman.

Kamera di tempat-tempat umum lebih dulu bisa mengaburkan wajah atau plat nomor. Perangkat rumah pintar bisa mengenali individu tanpa pernah menyimpan atau mengirim data gambar apa pun. Beberapa pajanan dapat digabungkan untuk membentuk peta panas atau frekuensi bidang pandang kamera.

Anda mungkin mengharapkan daya yang lebih tinggi atau latensi dari sebuah chip dengan proses AI terintegrasi, tetapi perusahaan seperti Xnor ( baru-baru ini diakuisisi oleh Apple ) telah menunjukkan bahwa tugas-tugas tersebut dapat dilakukan dengan sangat cepat dan dengan biaya yang sangat rendah .

Sementara pemrosesan yang lebih kompleks masih akan menjadi bidang kepingan yang lebih besar, chip yang lebih

kuat, jenis pass pertama ini mampu menghasilkan beragam data berharga dan, yang dirancang dengan baik, dapat terbukti lebih kuat terhadap serangan atau penyalahgunaan.

Saat ini “Sensor Visi Cerdas” Sony masih hanya berupa prototipe, tersedia untuk pesanan untuk pengujian tetapi tidak untuk produksi. Tetapi karena Sony adalah salah satu penyedia sensor gambar terkemuka di dunia, ini kemungkinan akan menemukan jalannya ke beberapa perangkat dalam satu bentuk atau lainnya.

Sumber:

https://pitchengine.com/danuaji/9999/12/31/no-headline/002518120666442644985