OV5640摄像头MIPI CSI会有教程吗？

leoyang012 · 发表于 2019-12-26 00:59:00

本帖最后由 leoyang012 于 2019-12-28 21:40 编辑

1、刷原子的系统，默认会加载两个驱动，是跟mipi csi 摄像头相关的驱动，想学习一下MIPI CSI摄像头，但是无从下手，左盟主能否提供一些资料？                                                 mx6s_capture          14876  0
         ov5640_camera       19965  0

jckimi · 发表于 2019-12-26 00:59:01

兄弟，2个原因
1. 参见IMX6ULL参考手册，19章CSI，没有写MIPI CSI的支持，同样也可以看GPIO引脚，并没有支持MIPI的引脚。
2. IMX6ULL SoC内并没有ISP，对H264的压码，用软件来做的话，醒醒吧。
===========我是分割线=============
MIPI sensor点亮其实说简单很简单，说难，也很难，步骤如下：
1. 确认并修改dtsi，主要要几点， MIPI CSI bus，I2C bus，几组power，还有INCK
1.1 MIPI CSI bus的确认，主要是用了哪组bus，有些SoC可能有2，3组MIPI CSI bus，另外还要确认当前需要使用几条lane，常见的2条或者4条。还要按照硬件连接确认lane的对应关系。
1.2. I2C bus，MIPI sensor硬件上一般都是MIPI + I2C的，MIPI用来传输图像数据，I2C用来对sensor进行配置。就是对sensor内部的register进行配置。
1.3. 几组power，这个要确认，这几组power是硬件上给了，还是需要软件控制pmic给出。
1.4 INCK，这是给MIPI sensor的clock，需要确认是有SoC提供，还是sensor board上有晶振提供。另外需要确认数值，常见24Mhz，27Mhz, 37.125Mhz
2. 了解软件以及驱动框架，不同的厂家有不同的软件/驱动框架，对于sensor的配置，有的厂家sensor的配置使用.h头文件，比如安霸。有的厂家使用xml文件，比如Qualcomm。而对于驱动，有的厂家会使用v4l2，有的则会使用自家的API
3. MIPI sensor register config的获取，对于爱好者，或者说学习为主的来说，这部分是最困难的，99.9%的MIPI sensor register config，需要从原厂FAE那边拿到，你说看datasheet？抱歉，datasheet会隐藏掉部分关键的register设定，而这部分是会在相应的application notes里面。不签NDA，一般是拿不到的。而且，不从FAE那里拿到register config，一旦出问题，你几乎没有办法确认你的config是正确还是错误的。
4. 假设你攻克3这个难关，接下来就是porting sensor register到代码中，就可以放进板子里去debug了，debug主要分2类，
4.1 图像出不来，首选需要对照着sensor的datasheet，确认你sensor的power on顺序都正确，有些sensor是有特定的顺序的，有些则没关系。其次需要确认的register参数是正确的，并且都正确的下到sensor里面去了，正确性可以和FAE确认，有没有下到sensor里去，这部分可以使用逻辑分析仪去抓取比对。前面都没有问题，那恭喜你，你可以把玩上百万的示波器了。使用至少10G以上的示波器，去抓MIPI的眼图，CLK等信息，去和SoC原厂以及FAE探讨问题出在哪儿。软件层面，开启SOF/EOF/SOT/EOT等interrupt的debug log。

4.2 图像有出来，但是明显不正确。首先恭喜你，胜利女神在向你招手，此时切忌，抓BAYER pattern的RAW图像出来，如果RAW没问题，那点亮sensor的工作已经完成，下一步交给image tuning的同学去接手。如果RAW有问题，开启SOF/EOF/SOT/EOT等interrupt的debug log，确认MIPI lane的对应关系，以及MIPI的clk
5. 基本上到这里，该成功的也成功了，该放弃的也基本上放弃了，如果你成功了，那么恭喜你，万里长征只跨出了第一步。接下来还有image tuning/streaming server design/rtp rtsp推流等等一系列的活要干。