इवेंट कैमरा: Difference between revisions

{{short description|Type of imaging sensor}}

 

एक इवेंट कैमरा, जिसे तंत्रिकाप्रभावी कैमरा के रूप में भी जाना जाता है,<ref>{{cite journal |last1=Li |first1=Hongmin |last2=Liu |first2=Hanchao |last3=Ji |first3=Xiangyang |last4=Li |first4=Guoqi |last5=Shi |first5=Luping |title=CIFAR10-DVS: An Event-Stream Dataset for Object Classification |journal=Frontiers in Neuroscience |date=2017 |volume=11 |page=309 |doi=10.3389/fnins.2017.00309 |pmid=28611582 |language=English |issn=1662-453X|pmc=5447775 |doi-access=free }}</ref> सिलिकॉन रेटिना<ref>{{cite journal |last1=Sarmadi |first1=Hamid |last2=Muñoz-Salinas |first2=Rafael |last3=Olivares-Mendez |first3=Miguel A. |last4=Medina-Carnicer |first4=Rafael |title=एक इवेंट कैमरा का उपयोग करके बाइनरी स्क्वायर फिडुशियल मार्कर का पता लगाना|journal=IEEE Access |date=2021 |volume=9 |pages=27813–27826 |doi=10.1109/ACCESS.2021.3058423 |url=https://ieeexplore.ieee.org/document/9351958 |issn=2169-3536|arxiv=2012.06516 |s2cid=228375825 }}</ref> या गतिशील दृष्टि संवेदक,<ref>{{cite book |last1=Liu |first1=Min |last2=Delbruck |first2=Tobi |title=2017 IEEE International Symposium on Circuits and Systems (ISCAS) |chapter=Block-matching optical flow for dynamic vision sensors: Algorithm and FPGA implementation |date=May 2017 |pages=1–4 |doi=10.1109/ISCAS.2017.8050295 |arxiv=1706.05415 |isbn=978-1-4673-6853-7 |s2cid=2283149 |url=https://ieeexplore.ieee.org/document/8050295 |access-date=27 June 2021}}</ref> एक [[छवि संवेदक]] है जो चमक में स्थानीय परिवर्तनों पर प्रतिक्रिया करता है। ईवेंट कैमरे कैमरा कपाट (फ़ोटोग्राफ़ी) का उपयोग करके छवियों को अधिकृत नहीं करते हैं जैसा कि [[पारंपरिक (फ़्रेम) कैमरे]] करते हैं। इसके अतिरिक्त , एक घटना कैमरे के अंदर प्रत्येक चित्रांश स्वतंत्र रूप से और अतुल्यकालिक रूप से संचालित होता है, चमक में होने वाले परिवर्तनों की प्रतिवेदन करता है, और अन्यथा निष्क्रिय रहता है।

घटना कैमरा चित्रांश स्वतंत्र रूप से चमक में होने वाले परिवर्तनों का प्रतिक्रिया दिखाते हैं।<ref name=":2" />प्रत्येक चित्रांश एक संदर्भ चमक स्तर संग्रहीत करता है, और लगातार इसकी तुलना वर्तमान चमक स्तर से करता है। यदि चमक में अंतर एक सीमा से अधिक है, तो वह चित्रांश अपने संदर्भ स्तर को पुनः स्थापित करता है और एक घटना उत्पन्न करता है: एक असतत पैकेट जिसमें चित्रांश पता और टाइमस्टैम्प होता है। घटनाओं में चमक परिवर्तन की ध्रुवीयता (वृद्धि या कमी), या रोशनी के स्तर का तात्कालिक माप भी हो सकता है।<ref name=":3" /> इस प्रकार, घटना कैमरे दृश्य रोशनी में परिवर्तन से प्रवर्तित होने वाली घटनाओं की एक अतुल्यकालिक वर्ग का उत्पादन करते हैं।[[File:Event camera comparison.jpg|thumb|इवेंट कैमरा और पारंपरिक कैमरा द्वारा तैयार किए गए डेटा की तुलना।]]इवेंट कैमरों में माइक्रोसेकंड समतुल्यकालिक विभेदन ,फ्रेम कैमरों की तुलना में 120 dB गतिक परिसर और कम अतिप्रभावाधीन (फ़ोटोग्राफ़ी) कम/ अतिप्रभावाधीन और [[ धीमी गति |धीमी गति]] होता है<ref name=":2" /><ref>{{Cite web|last=Longinotti|first=Luca|title=उत्पाद की विशेषताएं|url=https://inivation.com/support/product-specifications/|access-date=2019-04-21|website=iniVation}}</ref> । यह उन्हें उद्देश्य और कैमरा गतिविधि([[ ऑप्टिकल प्रवाह |ऑप्टिकल प्रवाह]]) को अधिक सटीक रूप से पथानुसरण करने की अनुमति देता है। वे ग्रे-स्केल जानकारी देते हैं। प्रारंभ में (2014), विभेदन 100 चित्रांश तक सीमित था। बाद की प्रविष्टि 2019 में 640x480 विभेदन तक पहुंच गई। क्योंकि व्यक्तिगत चित्रांश स्वतंत्र रूप से आग लगाते हैं, इवेंट कैमरे अतुल्यकालिक कंप्यूटिंग संरचना जैसे [[न्यूरोमॉर्फिक इंजीनियरिंग|तंत्रिकाप्रभावी इंजीनियरिंग]] के साथ एकीकरण के लिए उपयुक्त दिखाई देते हैं। चित्रांश स्वतंत्रता इन कैमरों को उन दृश्यों के साथ तालमेल बिठाने की अनुमति देती है, जिनमें उज्ज्वल और मंद रोशनी वाले क्षेत्र बिना औसत के होते हैं।<ref name=":7">{{Cite news|date=2022-01-29|title=एक नए प्रकार का कैमरा|newspaper=The Economist|url=https://www.economist.com/science-and-technology/a-new-type-of-camera/21807384|access-date=2022-02-02|issn=0013-0613}}</ref>

|+Typical image sensor characteristics

!Sensor

!Dynamic

range (dB)

!Equivalent

framerate* (fps)

!Spatial

resolution (MP)

!Power

consumption (mW)

|Human eye

|30–40

|High-end DSLR camera ([[Nikon D850]])

|2–8

|Ultrahigh-speed camera (Phantom v2640)<ref>{{Cite web|url=https://www.phantomhighspeed.com/products/cameras/ultrahighspeed/v2640|title=Phantom v2640|website=www.phantomhighspeed.com|access-date=2019-04-22}}</ref>

|Event camera<ref>{{Cite web|url=https://inivation.com/support/product-specifications/|title=Product Specifications|last=Longinotti|first=Luca|website=iniVation|access-date=2019-04-22}}</ref>

समतुल्यकालिक विभेदन संवेदक (जैसे डीवीएस<ref name=":2" /> (डायनामिक विजन संवेदक) या एसडीवीएस<ref name=":20" /> (संवेदनशील-डीवीएस)) ऐसी घटनाओं का उत्पादन करते हैं जो ध्रुवीयता (चमक में वृद्धि या कमी) का संकेत देते हैं, जबकि अस्थायी छवि संवेदक <ref name=":3" />प्रत्येक घटना के साथ तात्कालिक [[विकिरण]] का संकेत दें। डेविस<ref name=":0">{{Cite journal|last1=Brandli|first1=C.|last2=Berner|first2=R.|last3=Yang|first3=M.|last4=Liu|first4=S.|last5=Delbruck|first5=T.|date=October 2014|title=A 240 × 180 130 dB 3 µs Latency Global Shutter Spatiotemporal Vision Sensor|journal=IEEE Journal of Solid-State Circuits|volume=49|issue=10|pages=2333–2341|doi=10.1109/JSSC.2014.2342715|issn=0018-9200|bibcode=2014IJSSC..49.2333B|doi-access=free}}</ref> (डायनामिक और एक्टिव-चित्रांश विजन संवेदक ) में डायनेमिक विजन संवेदक (DVS) के अतिरिक्त एक ग्लोबल कैमरा कपाट [[सक्रिय पिक्सेल सेंसर|सक्रिय चित्रांश]] संवेदक (APS) होता है जो समान फोटोसेंसर ऐरे को साझा करता है। इस प्रकार, यह घटनाओं के साथ-साथ छवि फ़्रेम बनाने की क्षमता रखता है। कई इवेंट कैमरों में एक जड़त्वीय माप इकाई (IMU) भी होती है।

|+Event cameras

!Name

!Event output

!Image frames

!Color

!IMU

!Manufacturer

!Commercially available

!Resolution

|DVS128<ref name=":2">{{Cite journal|last1=Lichtsteiner|first1=P.|last2=Posch|first2=C.|last3=Delbruck|first3=T.|date=February 2008|title=A 128×128 120 dB 15μs Latency Asynchronous Temporal Contrast Vision Sensor|url=https://www.zora.uzh.ch/id/eprint/17629/1/Lichtsteiner_Latency_V.pdf|journal=IEEE Journal of Solid-State Circuits|volume=43|issue=2|pages=566–576|bibcode=2008IJSSC..43..566L|doi=10.1109/JSSC.2007.914337|issn=0018-9200|s2cid=6119048}}</ref>  

|Polarity

|No

|No

|No

|Inivation

|No

|128x128  

|Polarity

|No

|No

|No

|CSIC

|No

|Polarity

|Yes

|No

|Yes

|Inivation

|No

|Polarity

|Yes

|No

|Yes

|Inivation

|Yes

|Polarity

|No

|No

|Yes

|Inivation

|Yes

|Polarity

|Yes

|No

|Yes

|Insightness

|Yes

|Metavision Packaged Generation 3 Sensor<ref>{{Cite web |title=Metavision® Packaged Sensor |url=https://www.prophesee.ai/event-based-sensor-packaged/ |access-date=2022-04-14 |website=PROPHESEE |language=en-US}}</ref>

|Polarity

|No

|No

|No

|Prophesee

|Yes

|SilkyEvCam camera (Prophesee Gen 3)<ref>{{Cite web |title=Event Based Vision Camera - Century Arks |url=https://www.centuryarks.com/en/products/silkyevcam |access-date=2021-08-30}}</ref>  

|Polarity

|No

|No

|No

|Century Arks / Prophesee

|Yes

|640×480  

|VisionCamEB camera (Prophesee Gen 3) <ref>{{Cite web |date=2019-02-14 |title=IMAGO I PROPHESEE first industrial grade event-based vision system |url=https://www.prophesee.ai/2019/02/14/imago-prophesee/ |access-date=2022-04-14 |website=PROPHESEE |language=en-US}}</ref>  

|Polarity

|No

|No

|No

|Imago Technologies / Prophesee

|Yes

|640×480  

|Samsung DVS<ref>{{Cite book|last1=Son|first1=Bongki|last2=Suh|first2=Yunjae|last3=Kim|first3=Sungho|last4=Jung|first4=Heejae|last5=Kim|first5=Jun-Seok|last6=Shin|first6=Changwoo|last7=Park|first7=Keunju|last8=Lee|first8=Kyoobin|last9=Park|first9=Jinman|title=2017 IEEE International Solid-State Circuits Conference (ISSCC)|date=February 2017|chapter=4.1 A 640×480 dynamic vision sensor with a 9µm pixel and 300Meps address-event representation|location=San Francisco, CA, USA|publisher=IEEE|pages=66–67|doi=10.1109/ISSCC.2017.7870263|isbn=9781509037582|s2cid=19371922}}</ref>

|Polarity

|No

|No

|Yes

|Samsung

|Yes

|640×480  

|Onboard<ref name=":3">{{Cite journal|last1=Posch|first1=C.|last2=Matolin|first2=D.|last3=Wohlgenannt|first3=R.|date=January 2011|title=A QVGA 143 dB Dynamic Range Frame-Free PWM Image Sensor With Lossless Pixel-Level Video Compression and Time-Domain CDS|journal=IEEE Journal of Solid-State Circuits|volume=46|issue=1|pages=259–275|doi=10.1109/JSSC.2010.2085952|issn=0018-9200|bibcode=2011IJSSC..46..259P|s2cid=21317717}}</ref>

|Polarity

|No

|No

| Yes

|Prophesee

|No

|Intensity

|Yes

|No

| Yes

|CelePixel

|Yes

|IMX636<ref>{{Cite web|title=Sony to Release Two Types of Stacked Event-Based Vision Sensors with the Industry's Smallest 4.86μm Pixel Size for Detecting Subject Changes Only Delivering High-Speed, High-Precision Data Acquisition to Improve Industrial Equipment Productivity｜News Releases｜Sony Semiconductor Solutions Group|url=https://www.sony-semicon.co.jp/e/news/2021/2021090901.html|access-date=2021-10-28|website=Sony Semiconductor Solutions Group|language=ja}}</ref> sensor

|Polarity

|Yes

|No

| No

|Sony / Prophesee

|Yes

|1280x720  

|EVK3<ref>{{Cite web |title=Event-Based Evaluation Kit 3 - VGA / HD |url=https://www.prophesee.ai/event-based-evk-3/ |access-date=2022-04-14 |website=PROPHESEE |language=en-US}}</ref> camera (IMX636 ES/ Prophesee Gen 3.1)

|Polarity

|No

|No

|No

|Prophesee

|Yes

|1280x720 / 640×480  

|EVK4<ref>{{Cite web |last=Staff |first=Embedded |date=2022-04-13 |title=Eval kit for Sony sensor featuring Prophesee event-based vision tech |url=https://www.embedded.com/eval-kit-for-sony-sensor-featuring-prophesee-event-based-vision-tech/ |access-date=2022-04-14 |website=Embedded.com |language=en-US}}</ref> camera (IMX636 ES)

|Polarity

|No

|No

|No

|Prophesee

|Yes

|1280x720