Quando gli ingegneri valutano un modulo fotocamera, il consumo energetico viene spesso trattato come una semplice specifica elencata nella scheda tecnica. In realtà, il consumo energetico del modulo fotocamera è il risultato di più sottosistemi che lavorano insieme, tra cui il sensore di immagine, l'ISP, i buffer di memoria, le interfacce ad alta-velocità, gli orologi, i regolatori di tensione e il processore host.
Comprendere le fonti sottostanti del consumo energetico è fondamentale per i sistemi di visione integrati, le telecamere industriali, i dispositivi edge AI, i prodotti-alimentati a batteria e le applicazioni di visione artificiale. Una scarsa comprensione del comportamento energetico può portare a surriscaldamento, qualità dell'immagine instabile, durata ridotta della batteria e guasti imprevisti del sistema.
Ancora più importante, molti ingegneri presumono erroneamente che il consumo energetico sia direttamente proporzionale alla risoluzione del sensore. In pratica, il fattore dominante è spesso il throughput totale dell'immagine-la quantità di dati immagine che devono essere acquisiti, elaborati, trasmessi e analizzati ogni secondo.
Il consumo energetico inizia dalla velocità dei pixel
A livello di sensore, il consumo energetico è strettamente correlato al throughput dei pixel piuttosto che alla sola risoluzione.
Per esempio:
- 2 MP a 30 FPS=circa 60 milioni di pixel al secondo
- 5 MP a 30 FPS=circa 150 milioni di pixel al secondo
- 8 MP a 60 FPS=circa 480 milioni di pixel al secondo
Ogni pixel deve essere esposto, convertito dalla forma analogica a quella digitale, trasferito attraverso i circuiti di lettura dei sensori, elaborato dall'ISP, trasmesso attraverso l'interfaccia ed infine gestito dal processore host.
Con l’aumento della produttività dei pixel, quasi ogni blocco nella pipeline di imaging consuma più energia. Questo è il motivo per cui una fotocamera da 8 MP che funziona a frame rate elevati può consumare molte volte più energia di una fotocamera da 2 MP, anche quando entrambe utilizzano tecnologie di semiconduttori simili.
Il sensore di immagine è molto più che semplici pixel
Il sensore di immagine è spesso visto come il principale consumatore di energia, ma capire dove viene spesa la potenza del sensore richiede uno sguardo più approfondito alla sua architettura interna.
I moderni sensori di immagine CMOS contengono:
- Matrici di pixel
- Driver di riga e di colonna
- Amplificatori analogici
- Circuiti di doppio campionamento correlati
- Convertitori da analogico-a-digitale (ADC)
- Generatori di temporizzazione
- Serializzatori di output ad alta-velocità
Tra questi blocchi, gli ADC e i circuiti di uscita ad alta-velocità spesso rappresentano una parte significativa del consumo energetico del sensore. All'aumentare del frame rate, questi circuiti devono funzionare a frequenze più elevate, provocando un aumento sostanziale del consumo di energia dinamica.
L'imaging in condizioni di scarsa-illuminazione può anche aumentare i requisiti di alimentazione del sensore. Tempi di esposizione più lunghi, guadagno analogico più elevato e modalità HDR avanzate spesso richiedono operazioni aggiuntive del sensore che consumano più energia rispetto alle modalità di imaging standard.
Perché l'elaborazione ISP può diventare il più grande consumatore di energia
In molti moderni sistemi di fotocamere, l'Image Signal Processor (ISP) consuma tanta energia quanto il sensore stesso-o anche di più.
I dati grezzi del sensore non sono direttamente utilizzabili. Prima che un'immagine raggiunga il livello dell'applicazione, in genere passa attraverso decine di fasi di elaborazione:
- Demosaicizzazione
- Esposizione automatica (AE)
- Bilanciamento automatico del bianco (AWB)
- Correzione dell'ombreggiatura della lente (LSC)
- Correzione pixel difettosi (DPC)
- Riduzione del rumore
- Affilatura
- Correzione del colore
- Elaborazione HDR/WDR
- Regolazione gamma
- Mappatura dei toni
Molti di questi algoritmi operano su ogni pixel di ogni fotogramma. Con l’aumento della risoluzione e del frame rate, la complessità computazionale cresce rapidamente.
Le modalità HDR e WDR sono particolarmente impegnative perché è necessario catturare più esposizioni e unirle in un'unica immagine. In alcune applicazioni, l'abilitazione dell'HDR può aumentare il carico di lavoro dell'ISP di oltre il 50%, con conseguente aumento notevole del consumo energetico complessivo del sistema.
Il frame rate è spesso più importante della risoluzione
Molti ingegneri si concentrano molto sui megapixel trascurando il frame rate.
Dal punto di vista energetico, la frequenza dei fotogrammi può avere un impatto ancora maggiore rispetto alla risoluzione perché determina direttamente la frequenza con cui deve operare l'intera pipeline di imaging.
Considera una fotocamera da 2 MP:
- 2 MP a 30 FPS
- 2 MP a 60 FPS
- 2 MP a 120 FPS
Raddoppiando il frame rate si raddoppia di fatto l'attività di lettura del sensore, il carico di lavoro di elaborazione dell'ISP, la frequenza di accesso alla memoria e i requisiti di trasmissione dell'interfaccia.
Questo spiega perché le telecamere industriali ad alta-velocità spesso richiedono un raffreddamento attivo anche quando le loro risoluzioni sono relativamente modeste.
Il costo nascosto della memoria e del movimento dei dati
Una fonte di consumo energetico spesso trascurata è l’accesso alla memoria.
Molte operazioni di elaborazione delle immagini richiedono frame buffer temporanei archiviati nella memoria DDR. Ogni operazione di lettura e scrittura consuma energia.
Per i sistemi di visione AI, i dati delle immagini possono essere trasferiti più volte:
- Sensore all'ISP
- ISP alla memoria DDR
- Acceleratore da DDR a AI
- Acceleratore AI per CPU
- CPU da visualizzare o archiviare
In molti dispositivi edge AI, lo spostamento dei dati delle immagini attraverso la memoria consuma più energia degli stessi algoritmi di elaborazione delle immagini.
Il consumo energetico dell'interfaccia non è trascurabile
Le interfacce ad alta-velocità come USB 3.0, MIPI CSI-2 e Gigabit Ethernet richiedono circuiti di livello fisico dedicati che operano a frequenze molto elevate.
Con l'aumento del throughput delle immagini, i requisiti di larghezza di banda dell'interfaccia aumentano di conseguenza.
Ad esempio, la trasmissione di video 4K non compresso richiede una potenza di interfaccia notevolmente maggiore rispetto alla trasmissione di video 1080P compressi. In alcuni sistemi, la potenza dell'interfaccia può rappresentare una percentuale significativa del consumo totale del modulo telecamera.
Il consumo energetico influisce direttamente sulla qualità dell'immagine
Il consumo di energia non è solo una questione elettrica. Influisce direttamente sul comportamento termico.
All'aumentare della temperatura del sensore:
- La corrente oscura aumenta
- Il rumore dell'immagine diventa più visibile
- Il rapporto segnale-rispetto-rumore diminuisce
- Le prestazioni in condizioni di scarsa-illuminazione peggiorano
- L'affidabilità a lungo termine- potrebbe essere ridotta
Questo è il motivo per cui la progettazione termica è spesso inseparabile dalla scelta del modulo telecamera. Una telecamera che consuma solo un watt aggiuntivo può aumentare significativamente la temperatura operativa all'interno di un involucro compatto.
Suggerimenti per la selezione del modulo telecamera
Invece di selezionare il sensore con la risoluzione-più alta disponibile, gli ingegneri dovrebbero iniziare con i requisiti dell'applicazione e i vincoli del sistema.
- Determinare la densità effettiva dei pixel richiesta alla distanza target
- Definire il frame rate minimo accettabile
- Valuta attentamente i requisiti HDR/WDR
- Considerare gli obiettivi relativi al tempo di funzionamento della batteria
- Valutare i limiti termici dell'involucro
- Verificare le capacità del processore e della larghezza di banda della memoria
- Stimare la produttività totale dell'immagine prima di selezionare un sensore
In molte applicazioni di visione integrata, un modulo fotocamera da 2 MP o 5 MP opportunamente ottimizzato può raggiungere le prestazioni di imaging richieste consumando sostanzialmente meno energia rispetto a un'alternativa a risoluzione-più elevata.
