跳至主要内容

4 篇文章 含有標籤「攝影工程」

光學、感光元件、影像處理與視訊系統

檢視所有標籤

RV1126B AI-ISP|算力、頻寬與零拷貝

· 閱讀時間約 11 分鐘
tianrking
w0x7ce

同一個模型跑得很快,相機預覽依然可能掉幀。感光元件、ISP、RGA、NPU 和編碼器都有各自的佇列與緩衝區;一幀影像可以在等待、轉格式、搬資料或同步時消耗掉大部分預算。一張 4K NV12 影像約 12.44 MB,30 fps 時多一次全幀讀寫就約 746.5 MB/s。這筆流量與模型算了幾次乘加無關。

這篇從像素和記憶體成本出發,說清傳統 ISP、專用 AI-ISP 和標準 RKNN 模型分支各適合做什麼,再用 RV1126B 的實板輸入對照設計整機量測。

運動相機電子防抖|IMU 時序、果凍效應與 FEC

· 閱讀時間約 11 分鐘
tianrking
w0x7ce

同一段運動影片可以同時出現三種問題:整個畫面跟著手抖、垂直線在畫面內歪斜,以及輪廓被拖成一條帶。第一種來自幀與幀之間的視角改變,第二種來自同一幀各列的拍攝時間差,第三種則發生在單列曝光期間。三者都受運動影響,卻需要不同的測量和處理。

以焦距 800 px、轉速 300°/s 為例,只差 1 ms 就可能讓畫面中心偏 4.19 px。這個量級說明,機內防抖得先把 IMU、感光元件和錄影畫面的時間關係量清楚。

運動相機 ISP|快門、HDR 與時域降噪

· 閱讀時間約 11 分鐘
tianrking
w0x7ce

在暗處快速轉動運動相機,常能看到三種痕跡:輪廓拖寬、移動物體帶著透明重影、整條畫面忽亮忽暗。這些痕跡分別可能來自曝光積分、多曝光或時域融合,以及 AE 或照明變化。先辨認發生在哪一段,才能調對快門、HDR 或降噪。

在 K12S-C + IMX415 的固定室內場景,我們讀了 32 組曝光、增益與編碼幀率。這組基線用來核對目前跑的模式。接下來要用可重複的光線和運動把畫質差異量出來。

水下成像|紅光衰減、背向散射與色彩恢復

· 閱讀時間約 11 分鐘
tianrking
w0x7ce

水下照片常有三種不同問題:紅色變暗,遠處像罩了層霧,潛燈一開又滿是亮點。第一種來自波長相關的衰減與光源色譜;第二種主要是水體把光散入鏡頭;第三種常是燈把鏡頭前的懸浮物照亮。同一張圖可以同時出現三種問題。

MS5837 量得到相機所在水深,這能幫助估計環境光。畫面中每個物體有各自的相機至主體距離,還可能受到不同的燈光照射。先把這幾段光程分開,才能決定白平衡、去散射和補光分別該做什麼。