请关注大佬原文Commercial Camera ISP 的江湖 - 知乎
本文仅仅用于备份学习，根据原博主的介绍，需要自己去了解这些公司和ISP。
第三方还在卖ip
有socionext，arm和ov
sni就是原来的fujitsu，尼康expeed处理器是他家做的，具体流程不方便说，但是sni有很多借鉴
arm的isp来自收购的apical，实话实说很烂，海思早期芯片用的他家的，后来自己做了。
ov水平和apical差不多，一样的烂。
以前imagination也做ISP，然而没做好，也没人敢用，属于没法用的。
以前dxo也做isp，基于dsp的，学院派没法用，后来被gopro收了，也就死掉了
出isp芯片并且敞开卖的公司
主要有socionext和amba，ti，海思，sni稍微好半档，ti人都跑了，海思规格最猛，基本上属于能覆盖监控，运动相机，卡片机水平，侧重视频
手机芯片isp
高通，三星，苹果，海思和mtk，后面俩稍微弱一些，顺带说一句，海思监控和手机部门用的是两套isp，手机基本侧重拍照，现在大量玩计算摄影，和传统isp有区别
出isp芯片自用的公司
侧重点也不太一样，拍照视频对焦这些衡量因素很多，很难一概而论，活着的都有自己的手段，按照拍照水平，富士强一些，索尼松下差不多，佳能尼康稍差一些，按照视频水平，松下索尼佳能都把专业视频做进去了，尼康还没找到北，富士在里面算比较折衷。
isp的江湖大概这样子。
台湾的altek，联咏。华为手机就用altek的。
华为用过太多家ISP，altek只是其中之一，而且是N年以前的事情，用也只是RAW前处理，并非完整方案
听说altek做isp的人撤去某塑料加工大厂了，留下的规格可能还在zoran时代。华为用的那颗只有前端处理，不是完整的isp。联咏点的科技树是堆dsp，isp部分没见到有演进，台湾系的其实还有一些，都是以前卡片机时代积累下来的，isp方案都挺传统的，但是在相机系统的理解上，和日本原厂差距很大
apical主要是面向监控市场，被arm收购后转向车载市场，也对外卖IP。
AMD买的德国一家公司的IP，这个IP卖了很多家，属于前几代产品，功能太少。rockchip也是用的这个。
AMD用的德国IP是silicon image，silicon image自己不做,买的德国这家叫Dream chip，silicon image被lattice收购后，德国这家就不支持了
图像处理的手段通常就三类，帧内，帧间，样本集，三种手段的架构设计各不一样，所以没有什么发展方向，主要看应用需求。另外，isp不仅仅为图像处理设计，还有很多需求来自3a，编码和显示，因此是一个系统级ip
对于纯dsp方案，我个人觉得不靠谱。举个例子，以4kp60大约500Mpix/s的速率，每个pix成像需要大约2000个ops，折合1Tops的算力，功耗预算在500mw左右，带宽预算在50Gbps左右，已经远远超过dsp所能达到的水平，即使能做到也是挂满了加速器和大量sram交织，设计开销不划算了。
Google的计算成像，最早也是软件/DSP版本，后面都做成ASIC硬件加速
高通855的ISP号称CV ISP，里要有若干CV的ASIC加速
ISP已经成了一个系统，不再是单纯的pipeline + 3A
isp和其他ip不同，不是标准化的东西，里面knowhow太多，小团队摸索个十年八年没有输入等于零，只能抄个似是而非。