元數(shù)據(jù)
一、metadata（元數(shù)據(jù)）背景介紹
Metadata又稱為元數(shù)據(jù)，前綴詞“meta-”的意思是“之后”或“超出界限”。因此，元數(shù)據(jù)也可以指代“超出特定數(shù)據(jù)的數(shù)據(jù)”，即“用于描述數(shù)據(jù)的數(shù)據(jù)”（data about data）。最主要用于描述數(shù)據(jù)屬性（property）。
二、MIPI中的metadata
在MIPI的上下文中，metadata可能涉及多種類型的信息，具體取決于其應(yīng)用場合。例如，對于攝像頭接口（如MIPI CSI-2），metadata可能包括關(guān)于攝像頭模塊的參數(shù)信息、分辨率設(shè)置、幀率、色彩空間、白平衡設(shè)置、銳度、色度等。這些信息對于正確配置和使用攝像頭模塊至關(guān)重要。
此外，metadata還可能涉及與數(shù)據(jù)傳輸、同步、錯(cuò)誤檢測與校正等相關(guān)的控制信息。這些元數(shù)據(jù)對于確保數(shù)據(jù)的完整性和準(zhǔn)確性至關(guān)重要，特別是在高速、低功耗的傳輸環(huán)境中。
在更廣泛的范圍內(nèi)，MIPI的metadata還可能涉及系統(tǒng)級別的信息，如設(shè)備之間的連接關(guān)系、數(shù)據(jù)傳輸速率、功耗預(yù)算等。這些信息有助于系統(tǒng)級的設(shè)計(jì)和優(yōu)化，以確保整個(gè)系統(tǒng)的性能和功耗達(dá)到最佳狀態(tài)。
MIPI標(biāo)準(zhǔn)中的metadata具體定義和實(shí)現(xiàn)可能因不同的應(yīng)用和需求而有所差異，不同設(shè)備開發(fā)商在metadata中包含的信息也不盡相同。
三、奧比3D相機(jī)metadata
奧比3D相機(jī)一般包含IR模組、散斑發(fā)射模塊、激光測距模塊、彩色相機(jī)等組成，IR模組、彩色相機(jī)均由MIPI協(xié)議傳輸數(shù)據(jù)給到主板，因此會攜帶metadata。用戶可使用Orbbec SDK解析metadata，并在Orbbec Viewer中直觀查閱到當(dāng)前數(shù)據(jù)流的metadata信息。
以Gemini 335為例，支持的metadata包含如下內(nèi)容：
表 3-1 深度/IR metadata表
元數(shù)據(jù)（Metadata) | 含義 | 范圍 |
Timestamp | 圖像幀時(shí)間戳 | / |
Sensor Timestamp | 曝光中心時(shí)間戳 | / |
Frame Number | 幀序號 | / |
Auto Exposure | 自動(dòng)曝光開關(guān)，0代表關(guān)，1代表開 | [0,1] |
Exposure | 曝光時(shí)間（us) | 335：1~199000 335L：1~165000 |
Gain | 數(shù)字增益 | 16~248 |
AE ROI Left | 區(qū)域自動(dòng)曝光功能，起始點(diǎn)x坐標(biāo) | 0~1278 |
AE ROI Top | 區(qū)域自動(dòng)曝光功能，起始點(diǎn)y坐標(biāo) | 0~798 |
AE ROI Right | 區(qū)域自動(dòng)曝光功能，截止點(diǎn)x坐標(biāo) | 0~1279 |
AE ROI Bottom | 區(qū)域自動(dòng)曝光功能，截止點(diǎn)y坐標(biāo) | 0~799 |
Exposure Priority | 曝光優(yōu)先功能 | [0,1] |
HDR Sequence Name | HDR幀名稱 | 自定義內(nèi)容 |
HDR Sequence Size | HDR幀序列數(shù)量 0代表未生效，2代表開啟HDR | 0或2 |
HDR Sequence Index | HDR序列索引 0代表第一幀序列，1代表第二幀序列 | 0或1 |
Laser Power Level | 激光功率等級 | [0/1/2/3/4/5/6] |
Laser Status | 激光開關(guān)狀態(tài) | [0,1] |
Gpio Input Data | Gpio 輸入信息上報(bào) | Reserved |
表 3-2 RGB metadata表與含義
元數(shù)據(jù)（Metadata) | 含義 | 范圍 |
Timestamp | 圖像幀時(shí)間戳 | / |
Sensor Timestamp | 曝光中心時(shí)間戳 | / |
Frame Number | 幀序號 | / |
Auto Exposure | 自動(dòng)曝光開關(guān)，0代表關(guān)閉，1代表開啟 | [0,1] |
Exposure | 曝光值（us） | [1,10000] |
Gain | 曝光增益 | [0,128] |
Auto White Balance | 自動(dòng)白平衡 | [0,1] |
White Balance | 白平衡色溫（K） | [2800,6500] |
Brightness | 亮度 | [-64,64] |
Contrast | 對比度 | [0,100] |
Saturation | 飽和度 | [0,100] |
Sharpness | 銳度 | [0,100] |
Backlight Compensation | 背光補(bǔ)償，0代表關(guān)閉，1代表開啟 | [0,1] |
Hue | 色度 | [-180,180] |
Gamma | 伽馬 | [100,500] |
Power Line Frequency | 電力線路頻率 | [50,60,disabled,auto] |
Low Light Compensation | 暗光補(bǔ)償，0代表關(guān)閉，1代表開啟 | [0,1] |
Manual White Balance | 手動(dòng)白平衡色溫（K） | [2800,6500] |
Actual Frame Rate | 相機(jī)設(shè)定幀率 | [5,10,15,30,60] |
AE ROI Left | 區(qū)域自動(dòng)曝光功能，起始點(diǎn)x坐標(biāo) | 對于335,[0,1918] 對于335L,[0,1278] |
AE ROI Top | 區(qū)域自動(dòng)曝光功能，起始點(diǎn)y坐標(biāo) | 對于335,[0,1078] 對于335L,[0,798] |
AE ROI Right | 區(qū)域自動(dòng)曝光功能，截止點(diǎn)x坐標(biāo) | 對于335,[1,1919] 對于335L,[1,1279] |
AE ROI Bottom | 區(qū)域自動(dòng)曝光功能，截止點(diǎn)y坐標(biāo) | 對于335,[1,1079] 對于335L,[1,799] |
在用戶平臺上使用Orbbec 3D相機(jī)時(shí)，可使用metadata做幀信息判斷，進(jìn)行數(shù)據(jù)校正、丟幀校驗(yàn)、HDR融合等高級功能。