Introducció
Els dispositius de realitat augmentada (AR) (ulleres intel·ligents, pantalles muntades al cap) superposen imatges digitals al món real. Per fer-ho de manera convincent, han d'entendre l'entorn, fer un seguiment dels moviments del cap i capturar gestos. Totes aquestes funcions depenen de l'especialitatmòdul de càmeraunitats. A diferència d'una càmera web típica, les càmeres AR necessiten una latència extremadament baixa, velocitats de fotogrames elevades, obturador global i mida compacta. Aquest article explora els tipus demòdul de càmerautilitzatper a dispositius AR, els avantatges d'unMòdul de càmera OEMen dissenys personalitzats, i com aMòdul de càmera USBo fins i tot unmòdul de càmera endoscopi industrialpot informar el desenvolupament de RA.
Per què els dispositius AR necessiten càmeres especialitzades
Un auricular AR típic conté diverses càmeres:
- Càmeres orientades al món- captura l'escena real per SLAM (localització i mapeig simultània) i transmissió.
- Càmeres de seguiment ocular- Supervisar la posició de l'alumne per a la representació foveated i el control del cursor.
- Sensors de profunditat– Mesurar distàncies per a l'oclusió i la interacció d'objectes.
Requisits clau per a aquestsmòdul de càmeraunitats:
- Obturador global– No hi ha desenfocament de moviment quan l'usuari mou el cap ràpidament.
- Alta velocitat de fotogrames– 60 fps o 120 fps per al seguiment de baixa latència.
- Potència baixa– Els dispositius que funcionen amb piles necessiten sensors eficients.
- Talla petita- caben en ulleres primes o auriculars compactes.
- Bon rendiment amb poca llum- Treballa a l'interior i a la nit.
1. Càmeres orientades al món (SLAM i Passthrough)
Sovint són monocroms o de colormòdul de càmerasensors amb obturador global. La resolució oscil·la entre VGA i 2 MP. Els sensors populars inclouen l'OmniVision OV7251 (VGA, obturador global) i Sony IMX214 (obturador enrotllable, utilitzat amb compensació de moviment). Per als auriculars de gamma alta,Mòdul de càmera OEMels fabricants personalitzen la lent per aconseguir un ampli camp de visió (100 graus -150 graus) sense distorsió.
A Mòdul de càmera USBDe vegades s'utilitza en kits de desenvolupament o dispositius AR connectats (ulleres que es connecten a un ordinador). Per als auriculars autònoms, la interfície sol ser MIPI CSI-2 per a una baixa latència.
2. Càmeres de seguiment ocular
El seguiment ocular necessita molt ràpid i sensiblemòdul de càmeraunitats: sovint funcionen a 120 fps o més. Aquestes càmeres són petites (sovint inferiors o iguals a 1 MP) i es col·loquen a prop dels ulls de l'usuari. Han de ser invisibles o situats darrere dels filtres de pas IR. La majoria dels mòduls de seguiment ocular utilitzen sensors CMOS d'obturador global amb sensibilitat a l'infraroig proper.
Anmòdul de càmera endoscopi industrialno s'utilitza directament per al seguiment ocular (és massa gran), però els mètodes de miniaturització (lents petites, PCB flexibles) són directament rellevants.
3. Càmeres de detecció de profunditat
Els dispositius AR utilitzen diverses tecnologies de profunditat:
Visió estèreo– dosmòdul de càmeraunitats juntes, calculant la disparitat.
Llum estructurada– un projector IR i amòdul de càmera(amb filtre IR-pass) llegiu el patró.
Temps de vol (ToF)- un mòdul de sensor ToF dedicat.
Per estèreo, amòdul de càmera OEM personalitzatLa parella amb el calibratge de fàbrica és essencial. Les dues càmeres han de tenir lents idèntiques i estar fixades en una carcassa rígida.
4. Càmeres de seguiment de gestos i mans
Alguns dispositius AR utilitzen cap avall o cap a foramòdul de càmeraunitats per rastrejar les mans. Aquests necessiten un ampli camp de visió i un obturador global per capturar gestos ràpids. La resolució sol ser de 720p o 1080p.
Per què els mòduls de càmera OEM són crítics per a la RA
Disponiblemòdul de càmeraEls productes rarament compleixen tots els requisits de RA. AnMòdul de càmera OEML'enfocament permet:
Lent personalitzada: FOV, obertura i perfil de distorsió específics.
Forma de PCB personalitzada: per adaptar-se a un espai limitat.
Interfície personalitzada: MIPI (baixa latència), no USB.
Calibració de fàbrica: per a parells estèreo o alineació ToF.
Ajust de baixa potència: per allargar la durada de la bateria.
Moltes startups de RA comencen amb aMòdul de càmera USBprototip (utilitzant UVC) per provar algorismes. Un cop madura el disseny, s'associen amb unMòdul de càmera OEMproveïdor per crear un mòdul llest per a la producció.
Com es relaciona un mòdul de càmera d'endoscopi industrial amb AR
Anmòdul de càmera endoscopi industrialestà dissenyat per a la inspecció de canonades: és llarg, prim i impermeable. Tot i que no s'utilitzen directament a les ulleres AR, les tècniques de miniaturització (lents de diàmetre petit, PCB flexibles, sensors de baixa potència) les prenen prestades els dissenyadors de càmeres AR. Per exemple, una càmera d'endoscopi de 2 mm utilitza els mateixos petits sensors d'obturador global que eventualment podrien cabre en ulleres intel·ligents.
Especificacions clau de la càmera per a AR
| Tipus de càmera | Resolució | Velocitat de fotogrames | Obturador | Interfície |
|---|---|---|---|---|
| De cara al món (SLAM) | VGA - 2 MP | 60-120 fps | Global | MIPI |
| Seguiment ocular | 0,3-1 MP | 120 fps | Global | MIPI |
| Profunditat (estèreo) | 1–2 MP cadascun | 30-60 fps | Global | MIPI |
| Seguiment de la mà | 720p – 1080p | 30-60 fps | Global | MIPI |
Mòdul de càmera USB en prototipatge AR
A Mòdul de càmera USB(UVC) és una excel·lent eina de prototipatge. Podeu connectar una o dues càmeres USB a un ordinador i provar SLAM, seguiment manual o estimació de profunditat mitjançant OpenCV. Un cop el programari funcioni, passeu a unMòdul de càmera OEMamb MIPI per al maquinari final. Aquest enfocament en dos passos estalvia temps i redueix el risc.
Mòduls de càmera de Sincere per a dispositius AR
A Sincere, oferimmòdul de càmerasolucions per a aplicacions AR emergents:
Mòdul de càmera OEM– Dissenys personalitzats per orientar-se al món, seguiment ocular i profunditat estèreo.
Mòdul de càmera USB– per a la creació de prototips i dispositius AR connectats.
Mòdul de càmera endoscopi industrial- La nostra experiència en miniaturització s'aplica directament a les petites càmeres AR.
Resum
Mòduls de càmerautilitzatper a dispositius ARinclouen unitats orientades al món (SLAM), de seguiment ocular, de detecció de profunditat i de seguiment manual. Necessiten obturador global, velocitats de fotogrames elevades, baixa potència i petjades petites. AMòdul de càmera USBés ideal per crear prototips, però els auriculars AR de producció depenenMòdul de càmera OEMdissenys amb lents personalitzades i interfícies MIPI. Tècniques de miniaturització demòdul de càmera endoscopi industrialEls productes també beneficien l'enginyeria de càmeres AR. Tant si esteu creant un kit de desenvolupador com un auricular produït en massa, triar el mòdul de càmera adequat és clau per a una experiència de realitat augmentada convincent.
