当前位置: 首页 >  法制聚焦  >   >  正文

RK3588-Camera:MIPI-CSI调试之通路解析

  • 2023-06-11 13:14:05 来源:jf_30051736

一、简介

专栏总目录

本文介绍RK3588平台的Camera:MIPI-CSI调试之通路解析


(资料图片仅供参考)

MIPI联盟,即移动产业处理器接口(Mobile Industry Processor Interface 简称MIPI)联盟。MIPI(移动产业处理器接口)是MIPI联盟发起的为移动应用处理器制定的开放标准和一个规范。

目的是把手机内部的接口如摄像头、显示屏接口、射频/基带接口等标准化,从而减少手机设计的复杂程度和增加设计灵活性。

CSI & DSI

• CSI ( Camera Serial Interface ):摄像头接口

• DSI ( Display Serial Interface ):显示接口

二、 名词解释:

ISP ( Image Signal Processor ): 即图像信号处理模块, 主要作用是对前端图像传感器输出的信号做后期处理,依赖于 ISP 才能在不同的光学条件下都能较好的还原现场细节。VICAP( Video capture ):视频捕获单元

三、RK3588 的camera通路:

多sensor支持:

单路硬件isp最多支持4路复用,isp复用情况支持分辨率如下:2路复用:最大分辨率3840x2160,dts对应配置2路rkisp_vir设备。3路或4路复用:最大分辨率2560x1536,dts对应配置3或4路rkisp_vir设备。硬件支持最多采集7路sensor:6mipi + 1dvp,多sensor软件通路如下:

下图是RK3588 camera连接链路示意图,可以支持7路camera。

四、 链路解析:

图中:mipi camera2---> csi2_dphy1 ---> mipi2_csi2 ---> rkcif_mipi_lvds2--->rkcif_mipi_lvds2_sditf --->rkisp0_vir2

对应节点:imx415 ---> csi2_dphy0 ---> mipi2_csi2 ---> rkcif_mipi_lvds2--->rkcif_mipi_lvds2_sditf --->rkisp0_vir2

链接关系:sensor---> csi2 dphy---->mipi csi host--->vicap

实线链路解析: Camera sensor ---> dphy ---> 通过mipi_csi2模块解析mipi协议---> vicap ( rkcif节点代表vicap )

虚线链路解析:vicap ---> rkcif_mipi_lvds2_sditf ---> isp

每个vicap节点与isp的链接关系,通过对应虚拟出的XXX_sditf来指明链接关系。

五、RK3588硬件通路框图

rk3588支持2个isp硬件,每个isp设备可虚拟出多个虚拟节点,软件上通过回读的方式,依次从ddr读取每一路的图像数据进isp处理。对于多摄方案,建议将数据流平均分配到两个isp上。回读:指数据经过vicap采集到ddr,应用获取到数据后,将buffer地址推送给isp,isp再从ddr获取图像数据。

六、详细解析:

imx415 : Camera sensorcsi2_dphy0 : rk3588支持2个dphy硬件,这里我们称之为dphy0_hw/dphy1_hw ,,两个dphy硬件都可以工作在full mode 和split mode两种模式下。

当使用dphy0_hw:

full mode:节点名称使用csi2_dphy0,最多支持4 lane。当dphy0_hw使用full mode时,链路需要按照csi2_dphy1这条链路来配置,但是节点名称csi2_dphy1需要修改为csi2_dphy0,软件上是通过phy的序号来区分phy使用的模式。split mode:拆分成2个phy使用,分别为csi2_dphy1(使用0/1 lane)、csi2_dphy2(使用2/3 lane),每个phy最多支持2 lane。

当使用dphy1_hw:

full mode:节点名称使用csi2_dphy3,最多支持4 lane。当dphy1_hw使用full mode时,链路需要按照csi2_dphy4这条链路来配置,但是节点名称csi2_dphy4需要修改为csi2_dphy3,软件上是通过phy的序号来区分phy使用的模式。split mode:拆分成2个phy使用,分别为csi2_dphy4(使用0/1 lane)、csi2_dphy5(使用2/3 lane),每个phy最多支持2 lane。

dcphy:rk3588支持两个dcphy,节点名称分别为csi2_dcphy0/csi2_dcphy1。每个dcphy硬件支持RX/TX同时使用,对于camera输入使用的是RX。支持DPHY/CPHY协议复用;需要注意的是同一个dcphy的TX/RX只能同时使用DPHY或同时使用CPHY。其他dcphy参数请查阅rk3588数据手册。

使用上述mipi phy节点,需要把对应的物理节点配置上。(csi2_dcphy0_hw/csi2_dcphy1_hw/csi2_dphy0_hw/csi2_dphy1_hw)

每个mipi phy都需要一个csi2模块来解析mipi协议,节点名称分别为mipi0_csi2~mipi5_csi2。

rk3588所有camera数据都需要通过vicap,再链接到isp。rk3588仅支持一个vicap硬件,这个vicap支持同时输入6路mipi phy,及一路dvp数据,所以我们将vicap分化成rkcif_mipi_lvds~rkcif_mipi_lvds5、rkcif_dvp等7个节点,各个节点的绑定关系需要严格按照框图的节点序号配置。

每个vicap节点与isp的链接关系,通过对应虚拟出的XXX_sditf来指明链接关系。

rk3588支持2个isp硬件,每个isp设备可虚拟出多个虚拟节点,软件上通过回读的方式,依次从ddr读取每一路的图像数据进isp处理。对于多摄方案,建议将数据流平均分配到两个isp上。

直通与回读模式:•直通:指数据经过vicap采集,直接发送给isp处理,不存储到ddr。需要注意的是hdr直通时,只有短帧是真正的直通,长帧需要存在ddr,isp再从ddr读取。

•回读:指数据经过vicap采集到ddr,应用获取到数据后,将buffer地址推送给isp,isp再从ddr获取图像数据。

•在dts配置时,一个isp硬件,如果只配置一个虚拟节点,默认使用直通模式,如果配置了多个虚拟节点默认使用回读模式。

七、单路Camera的dts配置说明:( 以imx415摄像头为例 )

案例场景:这里使用的是csi2_dphy0的单路camera配置:链路配置: imx415 —> csi2_dphy0 —> mipi2_csi2 —> rkcif_mipi_lvds2—>rkcif_mipi_lvds2_sditf —>rkisp0_vir2
&i2c3 {status = "okay";imx415: imx415@1a {status = "okay";compatible = "sony,imx415";reg = < 0x1a >;clocks = < &cru CLK_MIPI_CAMARAOUT_M3 >;clock-names = "xvclk";pinctrl-names = "default";pinctrl-0 = < &mipim0_camera3_clk >;power-domains = < &power RK3588_PD_VI >;pwdn-gpios = < &gpio1 RK_PB0 GPIO_ACTIVE_HIGH >;reset-gpios = < &gpio4 RK_PA0 GPIO_ACTIVE_LOW >;rockchip,camera-module-index = < 0 >;rockchip,camera-module-facing = "back";rockchip,camera-module-name = "CMK-OT2022-PX1";rockchip,camera-module-lens-name = "IR0147-50IRC-8M-F20";port {imx415_out0: endpoint {remote-endpoint = < &mipidphy0_in_ucam0 >;data-lanes = < 1 2 3 4 >;};};};camera_imx219: camera-imx219@10 {status = "disabled";compatible = "sony,imx219";reg = < 0x10 >;clocks = < &clk_cam_24m >;clock-names = "xvclk";rockchip,camera-module-index = < 0 >;rockchip,camera-module-facing = "back";rockchip,camera-module-name = "rpi-camera-v2";rockchip,camera-module-lens-name = "default";port {imx219_out0: endpoint {remote-endpoint = < &mipidphy0_in_ucam1 >;data-lanes = < 1 2 >;};};};};&csi2_dphy0_hw {status = "okay";};&csi2_dphy0 {status = "okay";ports {#address-cells = < 1 >;#size-cells = < 0 >;port@0 {reg = < 0 >;#address-cells = < 1 >;#size-cells = < 0 >;mipidphy0_in_ucam0: endpoint@1 {reg = < 1 >;remote-endpoint = < &imx415_out0 >;data-lanes = < 1 2 3 4 >;};mipidphy0_in_ucam1: endpoint@2 {reg = < 2 >;remote-endpoint = < &imx219_out0 >;data-lanes = < 1 2 >;};};port@1 {reg = < 1 >;#address-cells = < 1 >;#size-cells = < 0 >;csidphy0_out: endpoint@0 {reg = < 0 >;remote-endpoint = < &mipi2_csi2_input >;};};};};&mipi2_csi2 {status = "okay";ports {#address-cells = < 1 >;#size-cells = < 0 >;port@0 {reg = < 0 >;#address-cells = < 1 >;#size-cells = < 0 >;mipi2_csi2_input: endpoint@1 {reg = < 1 >;remote-endpoint = < &csidphy0_out >;};};port@1 {reg = < 1 >;#address-cells = < 1 >;#size-cells = < 0 >;mipi2_csi2_output: endpoint@0 {reg = < 0 >;remote-endpoint = < &cif_mipi2_in0 >;};};};};&rkcif {status = "okay";};&rkcif_mipi_lvds2 {status = "okay";port {cif_mipi2_in0: endpoint {remote-endpoint = < &mipi2_csi2_output >;};};};&rkcif_mipi_lvds2_sditf {status = "okay";port {mipi_lvds2_sditf: endpoint {remote-endpoint = < &isp0_vir0 >;};};};&rkcif_mmu {status = "okay";};&rkisp0 {status = "okay";};&isp0_mmu {status = "okay";};&rkisp0_vir0 {status = "okay";port {#address-cells = < 1 >;#size-cells = < 0 >;isp0_vir0: endpoint@0 {reg = < 0 >;remote-endpoint = < &mipi_lvds2_sditf >;};};};&pinctrl {camera {cam_pwdn_gpio: cam-pwdn-gpio {rockchip,pins = < 1 RK_PB0 RK_FUNC_GPIO &pcfg_pull_up >;};};};

八、 调试技巧

8.1 i2c设备的通用调试命令:查看设备是否挂载到i2c总线下:

i2cdetect -y 3

8.2 摄像命令

Linux系统摄像命令:
gst-launch-1.0 v4l2src device=/dev/video11 ! video/x-raw,format=NV12,width=3840,height=2160, framerate=30/1 ! xvimagesink

Android系统:

Android系统自带相机APP。点击APP,看摄像画面是否正常显示。

8.3 imx415 相关的log信息

dmesg | grep imx415

8.4 查看拓扑结构

media-ctl -d /dev/media0 -p

审核编辑:汤梓红

标签:

最新推荐

RK3588-Camera:MIPI-CSI调试之通路解析

RK3588-Camera:MIPI-CSI调试之通路解析

道不行乘桴浮于海这句文言文的好处包括_道不行乘桴浮于海

1、如果我的主张行不通,我就乘上木筏子到海外去。2、【评析】“道不行

红酒最佳伴侣是指什么?

国内唇齿留香“赤霞珠”搭配伴侣:多种食物和菜系只要留意一下酒瓶上的

抹掉所有内容和设置是什么意思 开机 iphone_抹掉所有内容和设置是什么意思

1、意思是将手机的所有内部使用痕迹抹掉,包括所有的文件,照片,以及

世界聚焦:提高科学素养 “深海发现之旅”在国家海博馆启动

天津北方网讯:为做好世界海洋日暨全国海洋宣传日宣教活动,6月9日,中

qq等级排行榜全国第一2020(qq等级排行榜全国第一) 每日快看

1、七八十级现在已经有了吧,可能还有更高的,。2、目前见过最高的是69

河南麦收进入尾声 已收获小麦8402万亩 世界即时看

记者从河南省农业农村厅了解到,截至6月10日17时,河南省已收获小麦840

天狗吞月的故事简短20字_天狗吞月的故事

1、传说16世纪初,哥伦布航海与当地的土著人发生了冲突。2、哥伦布被困

明确的近义词是什么词(明确的近义词是什么) 环球讯息

来为大家解答以上的问题。明确的近义词是什么词,明确的近义词是什么这

wps和word和excel的区别(word和excel的区别)|天天新消息

1、MicrosoftExcel是微软公司的办公软件Microsoftoffice的组件之一,是由Microsoft

运动会通讯稿100字左右_运动会通讯稿600字_今日热讯

1、你们挥舞着充满力量的双臂,看着实心球化成美丽的弧线,我着实在心

当前头条:玉溪非遗资源系列微视频展播《玉溪手艺》之传奇鱼笼——大鱼笼编织工艺

传奇鱼笼——大鱼笼编织工艺非物质文化遗产是中华优秀传统文化的重要组

《蜘蛛侠动画版2》幕后:最小的动画师只有14岁|全球微速讯

在《蜘蛛侠动画版2》(Spider-Man:AcrosstheSpider-Verse)有各种各样

美英领导人发表《大西洋宣言》 美英寻求建立“新型创新伙伴关系”!-全球焦点

美国总统拜登8日在白宫会晤英国首相苏纳克。会后,双方发表《大西洋宣

朱元璋给孙子留下一人,完全能够对付朱棣,朱允炆却弃而不用

朱元璋给孙子留下一人,完全能够对付朱棣,朱允炆却弃而不用,明朝,自

中国经济体制改革研究会副会长樊纲:消费需求一时难以扩大,短期内仍寄希望于投资需求 全球时快讯

”樊纲表示,因就业不足,收入增长放缓,消费需求一时难以扩大,短期内

交通银行手机客户端,交通银行手机客户端收支账本怎么删除记录 世界微头条

本文内容是由小编为大家搜集关于交通银行手机客户端,以及交通银行手机

对华光伏板关税战,印度准备认输?|焦点讯息

面对超九成光伏板进口自中国的现实,印度的新能源产业自主雄心还是没能

12岁姑娘被查出肺结核!医生提醒:这病好发于年轻女性 看热讯

潮新闻客户端记者何丽娜通讯员夏泽海近期,12岁的姑娘小李(化名)染上

女生拒绝下班后团建第二天被开除 太欺负人了!!

【女生拒绝下班后团建第二天被开除】说起公司团建这个词,相信很多打工

每日热门:欧洲电池联盟负责人:到2030年,欧洲动力电池产能将仅次于中国

界面新闻实习记者高菁“我非常赞同开幕式上中国行业代表们谈到的一点:

全球快资讯丨逐步打造“15分钟社区就业服务圈”,浦东这个镇全面推进村居就业服务示范工作

近日,川沙新镇联合浦东新区就业促进中心,在界龙村村委会开展系列就业

2023世界动力电池大会在宜宾开幕-头条焦点

6月9日上午,2023世界动力电池大会开幕大会在四川宜宾举行。本次大会主

活飞自行车多少钱一辆(活飞自行车)-重点聚焦

1、不管是死飞还是活飞还是公路,只要是那么细的肆搭谨胎,首先这些就

环球简讯:巴萨戏耍梅西遭曝光!加泰媒体倒戈,谈2大操作,耽误球王去国米

梅西显然也是遭到了巴萨方面的戏耍,这也让加泰本地媒体都看不下去了。

江苏省教育考试院、省反诈中心联合发布涉高考诈骗重要提醒

01免试入学在招生录取诈骗中,最常见的就是不法分子打着招生机构有“内

严正化不敢看《车贞淑医生》首播,被夸后中断录影爆哭半小时

《车贞淑医生》中严正化扮演的女主在当了20多年的家庭主妇后,重返职场

浓烟下的美国:N95口罩、中国产空气净化器大卖|环球微资讯

随着来自加拿大野火产生的烟雾,一路途径纽约南下,甚至飘散到了美国东

川观评论 | 坚守“最佳” 创造“更佳”

川观新闻评论员邓也绿树丛生、鹭鸟成群、鱼翔浅底……日前,省生态环境

梅西非常清楚,放弃纽卡和国米报价,就是不想重蹈覆辙

很多人到现在还不太明白,梅西为何去往迈阿密国际,如果为了五大联赛的

硬核备战!河南投资集团燃气板块联合焦作市举办综合应急演练_天天信息

综合应急演练现场。赵子杭摄综合应急演练现场。赵子杭摄综合应急演练现

樊纲:今年5%以上经济增长可以期待-天天快资讯

在2023中国经济传媒大会上,中国经济体制改革会副会长、中国改革研究基

2023年高考结束!一路繁花相送,愿你前程似锦

原标题:2023年高考结束,考生们文明离校一路繁花相送愿你前程似锦6月9

环球实时:阿里P9下岗再就业

我是B站重度用户,在上面经常能够发现一些有趣的人和事。最近我开始留

云南楚雄:古老彝绣焕新颜

6月9日,绣娘在云南省楚雄市彝人古镇活动现场教小朋友刺绣。当日,“楚

鲁森比洛克足球俱乐部_关于鲁森比洛克足球俱乐部简述

小伙伴们,你们好,今天小夏来聊聊一篇关于鲁森比洛克足球俱乐部,关于

2023成都哪些景点用准考证可以免费游玩?

免费景点畅游 【都江堰景区】一、免票时间:2023年7月1日至2023年8

网络游戏板块涨2.8% 掌趣科技涨19.92%居首

网络游戏板块涨2 8%掌趣科技涨19 92%居首

这些省份,为何在猛建工科? 今日聚焦

6月9日,全国多数地区2023年高考结束。对于1291万名考生来说,一场“大

实蛋的做法大全_实蛋的做法 世界报道

1、准备五个鸡蛋,从一侧破壳,倒出蛋液,保留蛋壳,用小苏打和水稀释

热点在线丨绿豆用电饭锅要煮多久 绿豆用电饭锅要煮多长时间

1、绿豆用电饭锅要煮30-60分钟。2、豆子提前泡或不泡都行,洗干净加足

石狮八卦街保护提升工程新进展 全球关注

日前,记者从石狮凤里街道获悉八卦街保护提升工程又取得了新进展!“一

西部侨界青年论坛昆明举办 共话创业合作新机遇

(熊佳欣)8日,西部侨界青年论坛在云南昆明举办,来自中国云南、陕西

高考第三天北京持续“热风”模式 最高气温35℃阵风6级左右

中国天气网讯 今天(6月9日)是北京高考第三天,天气将继续“热风”

世界聚焦:辽宁省本溪市2023-06-06 21:07发布大风蓝色预警

一、辽宁省本溪市天气预报1、大风蓝色预警信号。2、预计6日21时到7日9

全球快资讯丨蜡笔小新剧场版国语下载(蜡笔小新剧场版国语)

导读1、您好,在《影电影》这纲站有。2、当我需要你帮我洗澡时,请不要

养猪技术大全农村(养猪技术大全)

导读1、我在,百汇商城买的养猪技术教程让我学到了真正的养猪技术让我

花间留香束如诗(花间留香)

来为大家解答以上的问题。花间留香束如诗,花间留香这个很多人还不知道

iphone6(a1586)|天天速递

来为大家解答以上问题,iphone6,a1586很多人还不知道,现在让我们一起

天天日报丨什么叫做无限小数视频(什么叫做无限小数)

来为大家解答以上的问题。什么叫做无限小数视频,什么叫做无限小数这个

X 广告
X 广告

精彩放送

长城汽车(02333):“长汽转债”转股价格调整为40.40元/股_前沿资讯

天天报道:acg文化产业(acg文化)

柯以敏直播主持人发声回应:每个人都应该被尊重,尤其是女性

全球看热讯:航班增加 机票价格回落 国内民航市场加快复苏进程

天天微动态丨联想推出拯救者无线上网伴侣:50M 带宽速率,149 元

全球视点!洛亚蒂群岛发生5.7级地震 震源深度50千米

新兴产业题材领跌 创业板指创3年新低 每日消息

当前速递!证监会同意两家企业创业板IPO注册

【聚看点】武汉邓南街“路长”为优化营商环境“保驾护航”

京津冀“3+N”联盟关节骨水泥类医用耗材集中带量采购开标 平均降价83.13%_全球要闻

疣猪是什么猪?可以人工饲养吗?-看热讯

每日看点!采购制度怎么写_采购制度

焦点讯息:沙特7月减产将提振美国原油出口

【新华500】新华500指数(989001)7日跌0.46%-当前讯息

丹东增殖放流中国对虾幼苗10亿尾 天天新要闻

环球热头条丨机构:韩国将垄断中大尺寸OLED发光材料需求至2027年

制作临时身份证、设“高考专席”,广州警方“一考点一团队一方案”为高考保驾护航 全球播报

小鹏拯救小鹏

淄博在全省首推“无还本续贷”创业担保贷款,企业无需还本也可续贷

南疆阿克苏的“流量密码”

液压行业市场深度调研 2023液压行业发展前景投资分析

克明食品:子公司5月生猪销售收入同比增38.4% 每日速递

港股异动 | 星空华文(06698)涨超4%创新高 总市值超500亿《中国好声音2023》网传将定档7月21日

智能点餐、家门口医疗、推进加梯……看普陀这里如何打造“美好社区”-世界观热点

关注“三夏”丨河北发布麦收消防安全提示:严禁焚烧麦茬麦秸,随收随打及时入仓 环球时讯

全球热消息:6月7日国内锌精矿市场价格汇总

世界微头条丨【高端访谈】RCEP全面生效促进区域经济一体化——访日本贸易振兴机构成都代表处首席代表森永正裕

2023年法网:德约科维奇与阿尔卡拉斯会师男单半决赛_世界要闻

@ 全国游客,贵州国有A级景区门票五折优惠 天天观热点

茅台回应跨界卖咖啡:非官方行为 系茅台冰淇淋店自发行为-环球速读

全球要闻:生活理念_关于生活理念介绍

天天热资讯!林克跑去造车了!当盖侬出现在《街头霸王6》

手机版生存游戏推荐 自己采集物资生存

环球要闻:永新股份:公司海外业务仍处于扩张期

天天即时:首开股份(600376)6月7日主力资金净买入81.28万元

聚焦年轻化!联想昭阳推出商用笔记本X系列,定制需求1台起订、未来将只使用回收塑料 世界短讯

4050人员是什么意思啊 4050人员是什么意思|环球热文

东京股市明显回落

广东将清理6人,杜锋挖青岛巨头,周琦再次鱼死网破,睢冉又落空

A股异动丨鸿博股份涨近6% 英博数科已于今年5月初产生营业收入与利润

共7套试卷 2023年高考作文题汇总来了!

观天下!开展12600余项减排项目 广东持续打好臭氧污染防治攻坚战

远大智能收年报问询函 被要求说明2022年净利润波动特征与前两年不一致的原因及合理性 世界速看料

最新快讯!哈尔滨商转公先还后贷是什么意思

苹果5手机密码忘了怎么解锁屏幕_苹果5手机密码忘了怎么解锁

世界新消息丨英国政府拨款2亿英镑在南剑桥建设新火车站

老舍兔这篇文章_老舍兔原文赏析

全球今头条!2023上海高考|高考首日气温“2”打头,局部地区有阵雨

安德烈·昆哈

四川高考过后什么时候填志愿省完一般多久

Copyright ©  2015-2023 今日律师网版权所有  备案号:沪ICP备2023005074号-40   联系邮箱:5 85 59 73 @qq.com