RK3588-Camera:MIPI-CSI调试之通路解析_全球动态
一、简介
专栏总目录
本文介绍RK3588平台的Camera:MIPI-CSI调试之通路解析
(资料图)
MIPI联盟,即移动产业处理器接口(Mobile Industry Processor Interface 简称MIPI)联盟。MIPI(移动产业处理器接口)是MIPI联盟发起的为移动应用处理器制定的开放标准和一个规范。
目的是把手机内部的接口如摄像头、显示屏接口、射频/基带接口等标准化,从而减少手机设计的复杂程度和增加设计灵活性。
CSI & DSI
• CSI ( Camera Serial Interface ):摄像头接口
• DSI ( Display Serial Interface ):显示接口
二、 名词解释:
ISP ( Image Signal Processor ): 即图像信号处理模块, 主要作用是对前端图像传感器输出的信号做后期处理,依赖于 ISP 才能在不同的光学条件下都能较好的还原现场细节。VICAP( Video capture ):视频捕获单元三、RK3588 的camera通路:
多sensor支持:
单路硬件isp最多支持4路复用,isp复用情况支持分辨率如下:2路复用:最大分辨率3840x2160,dts对应配置2路rkisp_vir设备。3路或4路复用:最大分辨率2560x1536,dts对应配置3或4路rkisp_vir设备。硬件支持最多采集7路sensor:6mipi + 1dvp,多sensor软件通路如下:下图是RK3588 camera连接链路示意图,可以支持7路camera。
四、 链路解析:
图中:mipi camera2---> csi2_dphy1 ---> mipi2_csi2 ---> rkcif_mipi_lvds2--->rkcif_mipi_lvds2_sditf --->rkisp0_vir2
对应节点:imx415 ---> csi2_dphy0 ---> mipi2_csi2 ---> rkcif_mipi_lvds2--->rkcif_mipi_lvds2_sditf --->rkisp0_vir2
链接关系:sensor---> csi2 dphy---->mipi csi host--->vicap
实线链路解析: Camera sensor ---> dphy ---> 通过mipi_csi2模块解析mipi协议---> vicap ( rkcif节点代表vicap )
虚线链路解析:vicap ---> rkcif_mipi_lvds2_sditf ---> isp
每个vicap节点与isp的链接关系,通过对应虚拟出的XXX_sditf来指明链接关系。
五、RK3588硬件通路框图
rk3588支持2个isp硬件,每个isp设备可虚拟出多个虚拟节点,软件上通过回读的方式,依次从ddr读取每一路的图像数据进isp处理。对于多摄方案,建议将数据流平均分配到两个isp上。回读:指数据经过vicap采集到ddr,应用获取到数据后,将buffer地址推送给isp,isp再从ddr获取图像数据。六、详细解析:
imx415 : Camera sensorcsi2_dphy0 : rk3588支持2个dphy硬件,这里我们称之为dphy0_hw/dphy1_hw ,,两个dphy硬件都可以工作在full mode 和split mode两种模式下。当使用dphy0_hw:
full mode:节点名称使用csi2_dphy0,最多支持4 lane。当dphy0_hw使用full mode时,链路需要按照csi2_dphy1这条链路来配置,但是节点名称csi2_dphy1需要修改为csi2_dphy0,软件上是通过phy的序号来区分phy使用的模式。split mode:拆分成2个phy使用,分别为csi2_dphy1(使用0/1 lane)、csi2_dphy2(使用2/3 lane),每个phy最多支持2 lane。当使用dphy1_hw:
full mode:节点名称使用csi2_dphy3,最多支持4 lane。当dphy1_hw使用full mode时,链路需要按照csi2_dphy4这条链路来配置,但是节点名称csi2_dphy4需要修改为csi2_dphy3,软件上是通过phy的序号来区分phy使用的模式。split mode:拆分成2个phy使用,分别为csi2_dphy4(使用0/1 lane)、csi2_dphy5(使用2/3 lane),每个phy最多支持2 lane。dcphy:rk3588支持两个dcphy,节点名称分别为csi2_dcphy0/csi2_dcphy1。每个dcphy硬件支持RX/TX同时使用,对于camera输入使用的是RX。支持DPHY/CPHY协议复用;需要注意的是同一个dcphy的TX/RX只能同时使用DPHY或同时使用CPHY。其他dcphy参数请查阅rk3588数据手册。
使用上述mipi phy节点,需要把对应的物理节点配置上。(csi2_dcphy0_hw/csi2_dcphy1_hw/csi2_dphy0_hw/csi2_dphy1_hw)
每个mipi phy都需要一个csi2模块来解析mipi协议,节点名称分别为mipi0_csi2~mipi5_csi2。
rk3588所有camera数据都需要通过vicap,再链接到isp。rk3588仅支持一个vicap硬件,这个vicap支持同时输入6路mipi phy,及一路dvp数据,所以我们将vicap分化成rkcif_mipi_lvds~rkcif_mipi_lvds5、rkcif_dvp等7个节点,各个节点的绑定关系需要严格按照框图的节点序号配置。
每个vicap节点与isp的链接关系,通过对应虚拟出的XXX_sditf来指明链接关系。
rk3588支持2个isp硬件,每个isp设备可虚拟出多个虚拟节点,软件上通过回读的方式,依次从ddr读取每一路的图像数据进isp处理。对于多摄方案,建议将数据流平均分配到两个isp上。
直通与回读模式:•直通:指数据经过vicap采集,直接发送给isp处理,不存储到ddr。需要注意的是hdr直通时,只有短帧是真正的直通,长帧需要存在ddr,isp再从ddr读取。
•回读:指数据经过vicap采集到ddr,应用获取到数据后,将buffer地址推送给isp,isp再从ddr获取图像数据。
•在dts配置时,一个isp硬件,如果只配置一个虚拟节点,默认使用直通模式,如果配置了多个虚拟节点默认使用回读模式。
七、单路Camera的dts配置说明:( 以imx415摄像头为例 )
案例场景:这里使用的是csi2_dphy0的单路camera配置:链路配置: imx415 —> csi2_dphy0 —> mipi2_csi2 —> rkcif_mipi_lvds2—>rkcif_mipi_lvds2_sditf —>rkisp0_vir2&i2c3 {status = "okay";imx415: imx415@1a {status = "okay";compatible = "sony,imx415";reg = < 0x1a >;clocks = < &cru CLK_MIPI_CAMARAOUT_M3 >;clock-names = "xvclk";pinctrl-names = "default";pinctrl-0 = < &mipim0_camera3_clk >;power-domains = < &power RK3588_PD_VI >;pwdn-gpios = < &gpio1 RK_PB0 GPIO_ACTIVE_HIGH >;reset-gpios = < &gpio4 RK_PA0 GPIO_ACTIVE_LOW >;rockchip,camera-module-index = < 0 >;rockchip,camera-module-facing = "back";rockchip,camera-module-name = "CMK-OT2022-PX1";rockchip,camera-module-lens-name = "IR0147-50IRC-8M-F20";port {imx415_out0: endpoint {remote-endpoint = < &mipidphy0_in_ucam0 >;data-lanes = < 1 2 3 4 >;};};};camera_imx219: camera-imx219@10 {status = "disabled";compatible = "sony,imx219";reg = < 0x10 >;clocks = < &clk_cam_24m >;clock-names = "xvclk";rockchip,camera-module-index = < 0 >;rockchip,camera-module-facing = "back";rockchip,camera-module-name = "rpi-camera-v2";rockchip,camera-module-lens-name = "default";port {imx219_out0: endpoint {remote-endpoint = < &mipidphy0_in_ucam1 >;data-lanes = < 1 2 >;};};};};&csi2_dphy0_hw {status = "okay";};&csi2_dphy0 {status = "okay";ports {#address-cells = < 1 >;#size-cells = < 0 >;port@0 {reg = < 0 >;#address-cells = < 1 >;#size-cells = < 0 >;mipidphy0_in_ucam0: endpoint@1 {reg = < 1 >;remote-endpoint = < &imx415_out0 >;data-lanes = < 1 2 3 4 >;};mipidphy0_in_ucam1: endpoint@2 {reg = < 2 >;remote-endpoint = < &imx219_out0 >;data-lanes = < 1 2 >;};};port@1 {reg = < 1 >;#address-cells = < 1 >;#size-cells = < 0 >;csidphy0_out: endpoint@0 {reg = < 0 >;remote-endpoint = < &mipi2_csi2_input >;};};};};&mipi2_csi2 {status = "okay";ports {#address-cells = < 1 >;#size-cells = < 0 >;port@0 {reg = < 0 >;#address-cells = < 1 >;#size-cells = < 0 >;mipi2_csi2_input: endpoint@1 {reg = < 1 >;remote-endpoint = < &csidphy0_out >;};};port@1 {reg = < 1 >;#address-cells = < 1 >;#size-cells = < 0 >;mipi2_csi2_output: endpoint@0 {reg = < 0 >;remote-endpoint = < &cif_mipi2_in0 >;};};};};&rkcif {status = "okay";};&rkcif_mipi_lvds2 {status = "okay";port {cif_mipi2_in0: endpoint {remote-endpoint = < &mipi2_csi2_output >;};};};&rkcif_mipi_lvds2_sditf {status = "okay";port {mipi_lvds2_sditf: endpoint {remote-endpoint = < &isp0_vir0 >;};};};&rkcif_mmu {status = "okay";};&rkisp0 {status = "okay";};&isp0_mmu {status = "okay";};&rkisp0_vir0 {status = "okay";port {#address-cells = < 1 >;#size-cells = < 0 >;isp0_vir0: endpoint@0 {reg = < 0 >;remote-endpoint = < &mipi_lvds2_sditf >;};};};&pinctrl {camera {cam_pwdn_gpio: cam-pwdn-gpio {rockchip,pins = < 1 RK_PB0 RK_FUNC_GPIO &pcfg_pull_up >;};};};
八、 调试技巧
8.1 i2c设备的通用调试命令:查看设备是否挂载到i2c总线下:
i2cdetect -y 3
8.2 摄像命令
Linux系统摄像命令:gst-launch-1.0 v4l2src device=/dev/video11 ! video/x-raw,format=NV12,width=3840,height=2160, framerate=30/1 ! xvimagesink
Android系统:
Android系统自带相机APP。点击APP,看摄像画面是否正常显示。
8.3 imx415 相关的log信息
dmesg | grep imx415
8.4 查看拓扑结构
media-ctl -d /dev/media0 -p
审核编辑:汤梓红
标签:
推荐文章
- RK3588-Camera:MIPI-CSI调试之通路解析_全球动态
- 公安机关以侦查为由相互勾结被控告人对控告人进行长期陷害,请问_每日热议
- 速讯:暖心相伴 “义”路同行
- 足坛年薪排行榜:姆巴佩跌至第4,第2和第3来自亚洲,第1实至名归
- realme领导人Madhav Sheth或成为荣耀印度区首席执行官 环球快资讯
- 即时焦点:拉伸应力应变计算公式(应力应变计算公式)
- 大运会火炬手邹敬园:希望全世界大学生感受到成都的文化
- 合力引导和规范资金进入 构建支持“双碳”战略的绿色金融体系
- 今日快讯:蜀中有杜处士好书画的翻译(蜀中有杜处士好书画所宝以百数翻译)
- 离线空间资源(离线空间)
- 全球观察:市委理论学习中心组召开学习(扩大)会议,尹力强调,以首善标准打好防范化解重大风险主动仗
- 最后一艘潜艇电影国语版百度云(最后一艘潜艇电影国语版)
- 被狼咬死的羊肉能不能吃?
- 各地税务部门不断优化服务 前5个月新办涉税经营主体643.5万户
- 高中生与大学生记者,曝光男子为找回80回后曹雪芹文笔,蜗居8平米23年
- 《跑男》收官将至,白鹿宋雨琦双双带“关系户”,baby疲态尽显_热门
- 大连开发区邮编标准_大连开发区邮编
- 3亿珠宝,9亿豪宅,67亿身家,这些港圈老牌美人晚年真有钱_简讯
- 观速讯丨财务会计简历怎么写 财务会计简历
- 恐怖《午夜迷途》现身全国院线电影推介会, “翁丁原始部落”引发群体震颤|全球今头条
- 2023年全国射击锦标赛(步手枪项目)落幕
- 苏州化工医院下午体检吗(苏州化工医院) 观速讯
- 低价团乱象再起 何以无解? 短讯
- 天天观热点:韩国服装品牌十大排名(韩国服装品牌)
- 华润集团发声明:“海外华润CRC”等非集团投资公司 天天简讯
- 环球百事通!食用碱灼伤皮肤怎么办小妙招,食用碱烧伤
- 广东省汕尾市政府原副市长郑俊雄接受审查调查|天天讯息
- 观察:零度战姬第三季会出吗(零度战姬第三季)
- 天天即时:2018年中国人均gdp已达到多少美元?(2018年中国人均gdp已经达到()美元)
- 首发魅族泰坦玻璃!魅族20 INFINITY无界版即将上市:6299元起
- 下单成年陪玩来的却是未成年人?陪玩行业乱象调查|天天精选
- 环球微速讯:俄央行维持7.5%基准利率不变
- 卧铺可自选上下铺位置 今日起12306试行在线选铺服务
- 投标报价不可竞争费包括哪些(不可竞争费包括哪些)
- ps图层叠加原理(ps图层叠加在哪里)
- 关于铁路计次票、定期票 如何购买使用
- 二十四节气顺序正确的是(二十四节气顺序)
- 当前头条:dnf火女卡片(dnf火女卡)
- 国米这巨星欧冠或当替补!出场144分钟进3球+1助攻,成决赛变数
- 焦点速讯:2023高考今日落幕,多地公布志愿填报时间
- 天天通讯!怎么洗鸭胗 怎样洗鸭胗
- 给男朋友的 18 岁生日礼物创意-世界要闻
- 当前热文:关于铁路计次票、定期票 如何购买使用
- 全球实时:谷歌Chrome浏览器更新,启用新界面增强密码管理
- 美债野蛮生长 国防开支节节攀升
- 发生在身边的事作文800字_发生在身边的事作文
- 6月9日,杭州市区二手房成交124套 动态焦点
- 古代公主封号等级划分 古代公主封号等级_天天热讯
- 【全球播资讯】三亚举办2023年“文化和自然遗产日”宣传活动
- 黄州区“政采贷”为中小微企业发展注入金融“活水”
- 精彩看点:当心!暑期+汛期,出游有风险!
- 海南省机关事务管理局保卫处、海南省直属机关保卫大队开展朗诵比赛活动|天天速读
- 两部门:今年主汛期珠江、闽江等流域可能发生较大洪水
- 桐新高速再传喜讯!芭蕉湾特大桥全桥左右幅全部贯通 全球新要闻
最新资讯
- 天天热头条丨济南海关查获禁止进口固体废物23吨
- 环球热资讯!工伤团体意外险怎么买?多少钱?
- 酒后试车去河滩 出了危险责谁担|环球今日讯
- 文化和自然遗产日丨河南郑州:校园里的“创意非遗嘉年华”
- 全球速递!兰州刻葫芦 方寸纳乾坤,
- 中证金融市场化转融资业务试点6月13日转常规
- 快手如何设置在线对其隐身_在线对其隐身 天天微速讯
- 是喝高度还是低度?一位酿酒师告诉你,两者白酒的区别
- 微信支付分开通不了怎么办
- @考生和家长 涉高考诈骗重要提醒!
- 【天天热闻】明溪:医药产业园施工忙
- 每日时讯!误食毒蘑菇的特效药是什么,误食毒蘑菇有什么症状
- 韩国运动品牌网站_韩国运动品牌 环球百事通
- 国内物价运行总体平稳——解读5月份CPI和PPI数据
- 刑事国家赔偿标准有哪些?-全球快讯
- 韩女星的20岁长这样,孙艺珍是小白花顶配,宋慧乔22年颜值没变化
- 何以致拳拳全文免费阅读 何以致拳拳txt
- 灭火器年检价格 灭火器年检价格
- 恶系宝可梦图鉴(恶系)
- 今日快看!唐德影视:公司向浙江易通发行股票事项在正常推动中
- 农家书屋管理员16年的坚守:让更多人乐享阅读
- 香港财经事务及库务局局长许正宇:丰富风险管理工具箱 将把人民币柜台连到港股通
- 每日报道:过渡养老金计算公式(过渡性养老金如何计算)
- 5月CPI低位运行PPI降幅扩大,需求偏弱仍需稳增长政策发力
- 【天天聚看点】文化遗产保护分论坛:让群众共享文化遗产保护成果
- 肝功能全套检查包括哪些项目(肝功能全套) 全球微头条
- 公司问答丨包钢股份:钪的提取与应用目前处于实验室研究阶段 世界热点
- 太仓房产博览会启动 线上线下联动促消费 刚需购房补贴契税 焦点速读
- 当前速讯:驻湛科研机构木薯种植机械化技术入选
- 董家_关于董家的简介
- 世界快资讯丨qq号怎么看什么时候注册的_怎么查qq注册时间
- 华骐环保:6月8日融资净买入47.17万元,连续3日累计净买入132.48万元
- 疏水作用力和疏水键的区别_疏水作用
- 淋淋沥沥_淋淋 世界速看料
- 全球播报:十大火锅连锁加盟(中国十大火锅加盟店最好的品牌是哪个)
- 福建省宁德市2023-06-06 15:23发布暴雨橙色预警
- 环球微头条丨解分式方程的格式需要写中文吗(解分式方程的格式)
- 主力资金连续5日以上净流入浙能电力等76股
- 环球报道:南非总统视察霍乱疫情重灾区
- 聚焦:联想笔记本电池保养的正确方法(联想笔记本电池保养)
- 关于思念的诗句_描写关于思念的古诗词句
- 机票均价低10% 端午跨省游热度下降
- 腾讯中科院AI心理咨询专利获授权,更加像人的机器人能干好心理咨询师的活吗_环球观察
- 什么是百家饭
- 【世界独家】雪峰科技:6月8日融资买入327.53万元,融资融券余额2.94亿元
- “recommend”和“recommending”的意思分别是什么?
- 发涉台不当言论,香港这个主持人被换掉了!
- wwdc(2017)
- 环球最资讯丨九联科技:业绩说明会定于6月16日举行
- 三安光电:6月8日融券净卖出111.99万股,连续3日累计净卖出203.97万股 前沿资讯